Open Collections

UBC Theses and Dissertations

UBC Theses Logo

UBC Theses and Dissertations

Administrative structures and procedures dealing with clinical failure of students in Canadian nursing.. 1991

You don't seem to have a PDF reader installed, try download the pdf

Item Metadata

Download

Media
UBC_1991_A2 O72.pdf [ 12.58MB ]
UBC_1991_A2 O72.pdf
Metadata
JSON: 1.0055906.json
JSON-LD: 1.0055906+ld.json
RDF/XML (Pretty): 1.0055906.xml
RDF/JSON: 1.0055906+rdf.json
Turtle: 1.0055906+rdf-turtle.txt
N-Triples: 1.0055906+rdf-ntriples.txt
Citation
1.0055906.ris

Full Text

ADMINISTRATIVE STRUCTURES AND PROCEDURES DEALING WITH CLINICAL FAILURE OF STUDENTS IN CANADIAN NURSING PROGRAMS By CAROLE ANNE ORCHARD B.S.N., The U n i v e r s i t y o f B r i t i s h C o l u m b i a , 1973 M.Ed., The U n i v e r s i t y o f B r i t i s h C o l u m b i a , 1979 A THESIS SUBMITTED IN PARTIAL FULFILLMENT OF THE REQUIREMENTS FOR THE DEGREE OF DOCTOR OF EDUCATION i n THE FACULTY OF GRADUATE STUDIES D e p a r t m e n t : o f A d m i n i s t r a t i v e , A d u l t and H i g h e r E d u c a t i o n We a c c e p t t h i s t h e s i s as c o n f o r m i n g t o t h e r e q u i r e d s t a n d a r d THE UNIVERSITY OF BRITISH COLUMBIA J a n u a r y , 1991 ® C a r o l e Anne O r c h a r d , 1991 In presenting this thesis in partial fulfilment of the requirements for an advanced degree at the University of British Columbia, I agree that the Library shall make it freely available for reference and study. I further agree that permission for extensive copying of this thesis for scholarly purposes may be granted by the head of my department or by his or her representatives. It is understood that copying or publication of this thesis for financial gain shall not be allowed without my written permission. Department of The University of British Columbia Vancouver, Canada DE-6 (2/88) ABSTRACT T h e r e has b e e n a g r o w i n g c o n c e r n r a i s e d by n u r s e e d u c a t o r s r e g a r d i n g t h e p o t e n t i a l f o r l i t i g a t i o n by n u r s i n g s t u d e n t s who a r e d i s s a t i s f i e d w i t h e d u c a t o r s ' a p p r a i s a l o f t h e s e s t u d e n t s ' c l i n i c a l p e r f o r m a n c e . A d e s c r i p t i v e s u r v e y u s i n g a c r o s s ^ s e c t i o n a l d e s i g n was u s e d t o a s s e s s t h e r e l a t i o n s h i p s between i n s t i t u t i o n a l p o l i c i e s and p r o c e d u r e s r e l a t e d t o s t u d e n t c l i n i c a l e v a l u a t i o n p r a c t i c e s and t h e i n c i d e n c e o f s t u d e n t g r i e v a n c e s and a p p e a l s o f f a c u l t y d e c i s i o n s . P o p u l a t i o n f o r t h i s s u r v e y was d i p l o m a and b a s i c b a c c a l a u r e a t e n u r s i n g programs i n Canada (N=94). The r e s p o n s e r a t e t o t h i s s u r v e y was 86.2% (81/94 p r o g r a m s ) . D a t a were o b t a i n e d u s i n g two s e l f - d e v e l o p e d q u e s t i o n n a i r e s w h i c h t e s t e d f o r s u p p o r t o f two p r o t o t y p i c models d e r i v e d f r o m l i t e r a t u r e r e v i e w e d . V a r i a b l e s s t u d i e d i n c l u d e d t h e d e c i s i o n - r m a k e r s' l o c a t i o n ( e d u c a t i o n a l i n s t i t u t i o n , h o s p i t a l ) , t h e i r r o l e or p o s i t i o n , t h e i r f u n c t i o n s , and t h e g u i d e l i n e s u n d e r w h i c h t h e y p e r f o r m e d s t u d e n t e v a l u a t i o n s . A l s o s t u d i e d were mechanisms a v a i l a b l e t o s t u d e n t s t o q u e s t i o n t h e d e c i s i o n . D a t a were a n a l y z e d u s i n g d e s c r i p t i v e s t a t i s t i c s . R e l i a b i l i t y o f t h e d a t a f r o m t h e a d m i n i s t r a t i v e p r a c t i c e s i n s t r u m e n t was a s s e s s e d u s i n g c o n t i n g e n c y t a b l e s w h i c h compared t h e program's r e p o r t e d d a t a t o i t s w r i t t e n p o l i c i e s and p r o c e d u r e s . The l e v e l o f agreement was a p p r o x i m a t e l y .50 w h i c h was c o n s i d e r e d a d e q u a t e b e a r i n g i n mind t h e f r e q u e n t d i s c r e p a n c i e s b e t w e e n p o l i c i e s and p r o c e d u r e s i n most i n s t i t u t i o n s . . T h e r e were f i v e s i g n i f i c i a n t f i n d i n g s , t h e s e b e i n g : (1) t h e r e e x i s t s a l a c k o f f a c u l t y e v a l u a t i o n s t a n d a r d s when e v a l u a t i n g s t u d e n t s i n c l i n i c a l s e t t i n g s , (2) i n o n e - r t h i r d o f t h e programs a c l i n i c a l i n s t r u c t o r a l o n e makes a s t u d e n t ' s c l i n i c a l d e c i s i o n , (3) i t a p p e a r s t h a t i n some programs t h e same members s e r v e on more t h a n one l e v e l o f r e v i e w p a n e l s , (4) p r o c e d u r e s employed i n t h e c o n d u c t i n g o f i n f o r m a l and f o r m a l h e a r i n g s a r e r a r e l y w r i t t e n , and (5) g r i e v a n c e and a p p e a l p a n e l s t e n d t o a l t e r p r o f e s s i o n a l j udgments o f n u r s e f a c u l t y e v e n t h o u g h p a n e l members f r e q u e n t l y a r e n o n s n u r s e s . i i R e l i a b i l i t y o f t h e d a t a f r o m t h e i n c i d e n c e o f g r i e v a n c e s and a p p e a l s i n s t r u m e n t was a s s e s s e d u s i n g c h i s q u a r e w i t h a Y a t e s c o r r e c t i o n was c o n s i d e r e d a d e q u a t e . T h e r e were 205 r e p o r t s o f s t u d e n t g r i e v a n c e o r a p p e a l h e a r i n g s . A t L e v e l I I ( g r i e v a n c e r e v i e w ) , 15 o f t h e e v a l u a t i v e d e c i s i o n s were m o d i f i e d ( 1 5 / 1 3 5 ) ; a t L e v e l I I I ( a p p e a l h e a r i n g ) , 60 o f t h e g r i e v a n c e r e v i e w d e c i s i o n s were m o d i f i e d ( 6 0 / 1 3 5 ) , and a t L e v e l IV ( i n s t i t u t i o n a l s t u d e n t a p p e a l ) , s e v e n o f t h e c a s e s h e a r d a t t h i s l e v e l were m o d i f i e d ( 7 / 2 0 ) . G u i d e l i n e s were p r o p o s e d r e g a r d i n g t h e s t r u c t u r e , p r o c e s s , and outcomes o f e d u c a t i o n i n s t i t u t i o n s ' g r i e v a n c e and a p p e a l s y s t e m s . i i i ACKNOWLEDGMENT Co m p l e t i o n o f t h i s study c o u l d not have been a c c o m p l i s h e d w i t h o u t t h e sup p o r t o f two s i g n i f i c a n t i n d i v i d u a l s who b e l i e v e d i n my a b i l i t y t o t a k e on t h i s t a s k . I e s p e c i a l l y want t o acknowledge my l a t e husband, Dr. Donald B. Or c h a r d and my academic a d v i s o r who g u i d e d me t h r o u g h the p r o c e s s Dr. John Andrews. Wi t h o u t t h e i r wisdom, t h o u g h t f u l p r o d d i n g s , and c o n s t r u c t i v e c r i t i c i s m s t h i s d i s s e r t a t i o n would not have been completed. I a l s o w i s h t o thank the o t h e r members o f my committee, Dr. M a r i l y n W i l l m a n , and Ms. K i t t y H e l l e r . Dr. W i l l m a n p r o v i d e d p r a c t i c a l i n s i g h t s i n t o t h i s study from a n u r s i n g p e r s p e c t i v e , and i n s i g h t f u l e d i t i n g s u g g e s t i o n s . Ms. H e l l e r ensured t h a t the l e g a l i n t e r p r e t a t i o n s were a c c u r a t e and gui d e d me i n the documents I s h o u l d r e v i e w t o sup p o r t d a t a a n a l y s e s . T h e i r guidance was i n v a l u a b l e i n c o m p l e t i n g t h i s r e s e a r c h r e p o r t . My thanks a r e a l s o extended t o Dr. Graham K e l s e y who h e l p e d me t o f o r m u l a t e my r e s e a r c h q u e s t i o n and t o Dr. P a t Crehan whose a d v i c e and sup p o r t g r e a t l y f a c i l i t a t e d t h e c o m p l e t i o n o f t h i s study s p r o p o s a l . Two o t h e r i n d i v i d u a l s who need t o be thanked f o r t h e i r p a t i e n c e and u n d e r s t a n d i n g o f my need f o r c o n c e n t r a t e d time a l o n e a r e my son P h i l i p and my s t e p * s o n D a v i d . The former f o r the many o c c a s i o n s he was w i l l i n g t o s a c r i f i c e our time t o g e t h e r t o complete t h i s paper, and the l a t t e r f o r h i s a d v i c e on my computer programming needs d u r i n g the w r i t i n g p r o c e s s . F i n a l l y , I w i s h t o thank the nurse e d u c a t o r s who p a r t i c i p a t e d i n t h i s study and my n u r s i n g c o l l e a g u e s who o f f e r e d encouragement and support t h r o u g h o u t t h i s p r o j e c t . i v TABLE OF CONTENTS ABSTRACT i ACKNOWLEDGMENTS i v L I S T OF TABLES v i i i L I S T OF FIGURES x i v CHAPTER 1. INTRODUCTION 1 B a c k g r o u n d t o t h e P r o b l e m 1 S t a t e m e n t o f t h e P r o b l e m 5 O v e r v i e w o f t h e Method . 7 D e f i n i t i o n o f Terms .8 L i m i t a t i o n s o f t h e S t u d y 11 S i g n i f i c a n c e o f t h i s S t u d y 12 2. REVIEW OF LITERATURE 15 H e a l t h S c i e n c e s L i t e r a t u r e 15 F a c t o r s A f f e c t i n g A s s e s s m e n t o f S t u d e n t s ' C l i n i c a l P e r f o r m a n c e . . . . . . 1 6 F o c i R e l a t e d t o E v a l u a t i o n P r o c e s s and R e v i e w 28 H i g h e r E d u c a t i o n L i t e r a t u r e 42 L e g a l L i t e r a t u r e 54 3. CONCEPTUAL FRAMEWORK 71 C o n c e p t u a l M o d e l 71 v Application of the Model to Reviews of C l i n i c a l Evaluative Decisions 73 Judgment Process 80 I n t e r r e l a t i o n s h i p Between the Judgment Model Components and the Levels of Review 83 Data Generation Model 85 4. RESEARCH PROCEDURES 89 Research Design 89 Population.... 90 Development and Testing of the Instruments 92 Measures for Data C o l l e c t i o n ..103 Methods for Data Analysis 106 5. RESULTS: DEMOGRAPHICS, ADMINISTRATIVE STRUCTURES AND PROCEDURES 112 Analysis of Demographic Variables 113 Analysis of E x i s t i n g Administrative Structures and Procedures.... 119 The Position(s) of the Decisionmaker 120 Location of the Decisionmaker 128 Functions of the Decisionmaker 132 Controls on the Decisionmaker 163 Students' Route to Question Decision.174 6. RESULTS: RELIABILITY AND VALIDITY 181 Variables from Golden's Study 181 v i P r o t o t y p i c M o d e l s 186 R e l i a b i l i t y and V a l i d i t y o f I n s t r u m e n t . . . 1 9 0 7. RESULTS: INCIDENCE OR GRIEVANCES AND APPEALS.195 R a t e o f C a s e s 202 R e l i a b i l i t y and V a l i d i t y o f I n s t r u m e n t . . . 210 Summary 213 8. SUMMARY, CONCLUSIONS, AND RECOMMENDATIONS 215 Summary ...215 F i n d i n g s 217 I n t e r p r e t a t i o n o f F i n d i n g s 220 I m p l i c a t i o n s o f t h e F i n d i n g s 232 L i m i t a t i o n o f t h e S t u d y 238 F u r t h e r R e s e a r c h 240 BIBLIOGRAPHY 242 APPENDIX : A. INSTRUMENT^1 TO ASSESS ADMINISTRATIVE STRUCTURES AND PROCEDURES 253 B. INSTRUMENTS TO ASSESS FREQUENCY OF STUDENT COMPLAINTS 274 C. COVER LETTER 278 D. DATA COLLECTION TOOL FOR INSTRUMENTS 280 E . DATA COLLECTION TOOL FOR INSTRUMENT-*2 298 F. SUMMARY OF CONTINGENCY TABLES OF AGREEMENT 305 v i i L I S T OF TABLES T a b l e P a S e 1. R e s p o n d e n t R e t u r n s B a s e d on U s e o f F o l l o w - u p s 105 2. C l u s t e r i n g o f Q u e s t i o n s A r o u n d D a t a G e n e r a t i o n M o d e l V a r i a b l e s 107 3. Number o f R e s p o n d e n t s , by P r o v i n c e 114 4. R e s p o n d e n t s t o S t u d y , by Type o f I n s t i t u t i o n 115 5. T y p e o f I n s t i t u t i o n R e s p o n d i n g t o S t u d y , by P r o v i n c e 115 6. S t u d e n t E n r o l l m e n t i n D i p l o m a and B a s i c B a c c a l a u r e a t e N u r s i n g Programs 117 7. Type o f N u r s i n g P r o g r a m O f f e r e d , by I n s t i t u t i o n .118 8. A v e r a g e Age o f S t u d e n t s E n t e r i n g D i p l o m a and B a s i c B a c c a l a u r e a t e N u r s i n g P r o g r a m s d u r i n g t h e 1984*85 A c a d e m i c Y e a r 118 9. The Number o f I n d i v i d u a l s M a k i n g a D e c i s i o n R e g a r d i n g a S t u d e n t ' s C l i n i c a l P e r f o r m a n c e 120 10. E x t e r n a l P r o g r a m R e v i e w o f C l i n i c a l E v a l u a t i o n D e c i s i o n s 122 11. P r o v i s i o n f o r C o n d u c t i n g a G r i e v a n c e Review.123 12. P e r s o n s I n c l u d e d i n A p p e a l H e a r i n g s 125 13. P r o v i s i o n s f o r I n s t i t u t i o n a l S t u d e n t A p p e a l H e a r i n g . 126 14. Summary o f P r o v i s i o n s f o r L e v e l s o f Review..127 15. L o c a t i o n o f R e v i e w e r s a t t h e F o u r L e v e l s o f R e v i e w 129 * • • v m T a b l e 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. Page L o c a t i o n o f D e c i s i o n w m a k e r a t e a c h L e v e l o f R e v i e w o f S t u d e n t s ' C l i n i c a l E v a l u a t i v e D e c i s i o n s 132 S t u d e n t s ' C l i n i c a l P e r f o r m a n c e s R e v i e w e d a t L e v e l I B o t h I n s i d e t h e N u r s i n g P r o g r a m and O u t s i d e o f t h e N u r s i n g P r o g r a m 134 Documents A s s e s s e d D u r i n g L e v e l I I G r i e v a n c e R e v i e w s 136 I n d i v i d u a l s I n t e r v i e w e d D u r i n g t h e G r i e v a n c e R e v i e w 137 Use o f and R o l e o f A d v i s o r s f o r S t u d e n t s and C l i n i c a l I n s t r u c t o r s D u r i n g G r i e v a n c e R e v i e w s 139 Methods U t i l i z e d i n R e p o r t i n g I n s t i t u t i o n s t o R e c o r d G r i e v a n c e R e v i e w s 140 G r i e v a n c e Review P a n e l s ' F o c u s d u r i n g R eview o f C l i n i c a l E v a l u a t i o n D e c i s i o n s 141 I n d i v i d u a l s I n t e r v i e w e d a t A p p e a l H e a r i n g s . . 1 4 2 A p p e a l H e a r i n g P r o c e d u r e s U s e d t o I n t e r v i e w P a r t i e s R e g a r d i n g t h e S t u d e n t ' s G r i e v a n c e . .144 Use o f and R o l e o f A d v i s o r s f o r S t u d e n t s and C l i n i c a l I n s t r u c t o r s D u r i n g A p p e a l H e a r i n g s 146 I n d i v i d u a l s D e t e r m i n i n g W i t n e s s e s or E v i d e n c e . t o be H e a r d D u r i n g A p p e a l H e a r i n g s 148 Documents A s s e s s e d a t A p p e a l H e a r i n g s 149 P u b l i c A c c e s s t o A p p e a l H e a r i n g s 150 A p p e a l H e a r i n g s ' F o c u s 150 i x T a b l e Page 30. Methods o f Documenting A p p e a l H e a r i n g s 152 31. Documents A s s e s s e d a t I n s t i t u t i o n a l Student A p p e a l H e a r i n g s 153 32. I n s t i t u t i o n a l S t u d e n t A p p e a l P a n e l s ' Focus D u r i n g Review o f C l i n i c a l E v a l u a t i o n D e c i s i o n s 154 33. A p p e a l H e a r i n g Documentation P l a c e d on A p p e a l i n g S t u d e n t s ' F i l e s 156 34. Summary o f I n d i v i d u a l s I n t e r v i e w e d D u r i n g G r i e v a n c e Reviews and Ap p e a l Hearings.. . 1 5 7 35. Documents Reviewed D u r i n g L e v e l s o f Review. . 1 5 8 36. A v a i l a b i l i t y o f A d v i s o r s t o S t u d e n t s and C l i n i c a l I n s t r u c t o r s d u r i n g G r i e v a n c e Reviews and A p p e a l H e a r i n g s 159 37. R e v i e w e r s Focus o f D e c i s i o n A p p r a i s a l a t Three L e v e l s o f Review 161 38. Form o f Documentation o f L e v e l s o f Review...162 39. L e v e l I , : R e v i e w e r o f S t u d e n t s ' C l i n i c a l P erformance D e c i s i o n s 164 40 . D e c i s i o n m a k i n g A u t h o r i t y o f G r i e v a n c e Review P a n e l s . . . 165 4 1 . P a r t i e s t o Whom Outcomes o f G r i e v a n c e Reviews a r e R e p o r t e d . .• 166 42 . D e c i s i o n m a k i n g A u t h o r i t y o f A p p e a l H e a r i n g P a n e l s 167 43 . Type o f D e c i s i o n s Made by Ap p e a l H e a r i n g P a n e l s 167 44 . P a r t i e s R e s p o n s i b l e f o r R e p o r t i n g Outcome o f Ap p e a l H e a r i n g s and t o Whom They Rep o r t Outcome 169 x T a b l e Page 45. D o c u m e n t a t i o n R e v i e w e d D u r i n g I n s t i t u t i o n a l S t u d e n t A p p e a l s 170 46. D e c i s i o n n m a k i n g A u t h o r i t y o f I n s t i t u t i o n a l S t u d e n t A p p e a l P a n e l s 172 47. Type o f D e c i s i o n s Made by I n s t i t u t i o n a l S t u d e n t A p p e a l P a n e l s 172 48. P e r s o n s R e c e i v i n g Outcome o f I n s t i t u t i o n a l S t u d e n t A p p e a l 173 49. D e c i s i o n m a k i n g Power o f P a n e l s a t T h r e e L e v e l s o f R e v i e w 174 50. P e r s o n s t o Whom Outcomes a r e R e p o r t e d f o r T h r e e L e v e l s o f R e v i e w s 175 51. S p e c i f i c a t i o n o f P o l i c i e s and P r o c e d u r e s G o v e r n i n g D u r a t i o n o f Time S t u d e n t Has t o I n i t i a t e G r i e v a n c e R e v i e w s F o l l o w i n g R e c e i p t o f C l i n i c a l E v a l u a t i o n 177 52. S t u d e n t s ' I n i t i a l C o n t a c t t o R e q u e s t G r i e v a n c e R e v i e w s 178 53. S p e c i f i c a t i o n o f P o l i c i e s and P r o c e d u r e s G o v e r n i n g t h e D u r a t i o n o f Time S t u d e n t Has t o I n i t i a t e A p p e a l H e a r i n g s ..178 54. S p e c i f i c a t i o n o f P o l i c i e s and P r o c e d u r e s G o v e r n i n g t h e D u r a t i o n o f Time a S t u d e n t Has t o I n i t i a t e an I n s t i t u t i o n a l S t u d e n t A p p e a l 179 55. S p e c i f i c a t i o n o f Time I n t e r v a l s f o r S t u d e n t s W i s h i n g t o I n i t i a t e R e v i e w s or A p p e a l s . . 1 8 0 56. C o m p a r i s o n o f t h e F r e q u e n c y o f H e a r i n g s i n G o l d e n 1 s S t u d y as Compared w i t h t h i s S t u d y 181 57. C o m p a r i s o n o f Use o f A d v i s o r s i n G o l d e n ' s S t u d y V e r s u s t h i s S t u d y ...183 x i Table P a 8 e 58. Comparison i n Use of Evidence and Witnesses Between Golden's Study and This Study...183 59. Comparison of Use of Recording Hearing Proceedings Between Golden's and the Present Study... 185 60. Model Component Emphasis at Each Level of Review or Hearing 187 61. Frequency of Program Respondent's Reporting the Provision of the Steps as Outlined i n the Flow Model of Judgments or Reviews..189 62. Summary of Reviews or Hearings i n Ins t i t u t i o n s 196 63. Number of Programs Providing Levels of Hearings or Reviews 197 64. Outcomes of Reviews or Hearings 198 65. Type of I n s t i t u t i o n From Which External Appeals Arose 199 66. Agency.Hearing Students' External Appeals ... 200 67. Students' Reasons for Requesting External Appeal 201 68. Rate of Cases per 100 Student Enrollments i n 1978 202 69. Rate of Cases per 100 Student Enrollments i n 1979 203 70. Rate of Cases per 100 Student Enrollments i n 1980 204 71. Rate of Cases per 100 Student Enrollments i n 1981 205 72. Rate of Cases per 100 Student Enrollments i n 1982 206 x i i Table Page 73. Rate of Cases per 100 Student Enrollments i n 1983 207 74. Rate of Cases per 100 Student Enrollments i n 1984 207 75. Rate of Cases per 100 Student Enrollments i n 1985 208 76. Rate of Cases per 100 Student Enrollments i n Unspecified Years 209 77. Rate of.Cases per 100 Student Enrollments i n A l l Years 209 78. S i m i l a r i t y i n Rate of Cases Across the Provinces by Type of I n s t i t u t i o n 211 79. Summary of Reviews or Hearings i n a l l Types of I n s t i t u t i o n s Throughout the Provinces :. 214 80. Heads of Nursing Programs as Members of Hearing or Review Panels 223 81. Comparison of Number of Foci Reviews were Directed at for Three Levels of Hearings 225 x i i i LIST OF FIGURES Figure Page 1. Judgment Model , 72 2. I n i t i a l Review of Decision 75 3. Second Level of Review 76 4. Third Level of Review 78 5. External Review of Decision 79 6. Flow Model of Judgments/Reviews 81 7. Data Generation Model 87 xiv 1 C H A P T E R 1 I N T R O D U C T I O N B a c k g r o u n d t o t h e P r o b l e m N u r s e e d u c a t o r s a r e d e v e l o p i n g a h e i g h t e n e d c o n c e r n r e g a r d i n g t h e i r l e g a l r i g h t s t o m a k e j u d g m e n t s a b o u t t h e i r s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e . B y q u e s t i o n i n g t h e s e d e c i s i o n s n u r s i n g s t u d e n t s a r e s h o w i n g a n i n c r e a s i n g a w a r e n e s s o f t h e i r r i g h t t o f a i r a n d r e a s o n a b l e e v a l u a t i o n s . I n s t i t u t i o n s w i t h n u r s i n g p r o g r a m s a r e c o n c e r n e d a b o u t t h e m a i n t e n a n c e o f p r o g r a m s t a n d a r d s a n d t h e r i g h t o f t h e p u b l i c t o p r o t e c t i o n f r o m u n s a f e p r a c t i t i o n e r s . T h i s t r i a d o f p o t e n t i a l l y c o n f l i c t i n g r i g h t s u s u a l l y i n f l u e n c e s i n s t i t u t i o n s t o d e v e l o p a d m i n i s t r a t i v e p r o c e d u r e s i n a n a t t e m p t t o r a t i o n a l i z e e a c h s e t o f r i g h t s : ( a ) f a c u l t y r i g h t s t o e v a l u a t e s t u d e n t p e r f o r m a n c e ; ( b ) s t u d e n t r i g h t s t o a f a i r a n d e q u i t a b l e a p p r a i s a l o f p e r f o r m a n c e ; a n d ( c ) i n s t i t u t i o n a l r i g h t s t o m a i n t a i n p r o g r a m s t a n d a r d s w h i c h a s s u r e t h a t g r a d u a t e s c a n p r o v i d e s a f e n u r s i n g c a r e ' t o t h e p u b l i c . 2 F a c u l t y r i g h t s t o e v a l u a t e s t u d e n t p e r f o r m a n c e . I n n u r s i n g e d u c a t i o n , r e q u i r e m e n t s o f t h e p r o g r a m i n c l u d e a p r a c t i c a l e x p e r i e n c e c o m p o n e n t . S u c c e s s f u l c o m p l e t i o n o f t h a t c l i n i c a l e x p e r i e n c e i s o n e o f t h e g r a d u a t i o n r e q u i r e m e n t s . S t u d e n t p e r f o r m a n c e d u r i n g t h e c l i n i c a l e x p e r i e n c e i s a s s e s s e d t o d e t e r m i n e t h e s t u d e n t ' s a b i l i t y t o a p p l y t h e o r e t i c a l k n o w l e d g e i n a p r a c t i c a l s e t t i n g . B e c a u s e o f i t s v e r y n a t u r e , e v a l u a t i o n o f t h i s c l i n i c a l e x p e r i e n c e i s s o s u b j e c t i v e t h a t n e g a t i v e d e c i s i o n s a r e h i g h l y v u l n e r a b l e t o p e r c e p t i o n s o f u n f a i r n e s s a n d t h u s a r e f r e q u e n t l y c h a l l e n g e d t h r o u g h g r i e v a n c e a n d a p p e a l s y s t e m s . T h e g r o w i n g c o n c e r n a b o u t s t u d e n t q u e s t i o n i n g o f e v a l u a t i v e d e c i s i o n s i s r e s u l t i n g i n a r e l u c t a n c e t o f a i l s t u d e n t s w h o i n t h e j u d g m e n t o f f a c u l t y h a v e n o t a c h i e v e d a p a s s i n g s t a n d a r d i n t h e c l i n i c a l e x p e r i e n c e c o m p o n e n t . T h i s c o n c e r n i s f u r t h e r r e i n f o r c e d b y a f e a r t h a t t h e p r o f e s s i o n a l j u d g m e n t o f t h e e d u c a t o r w i l l b e o v e r t u r n e d a t h i g h e r l e v e l s i n t h e i n s t i t u t i o n o r i n t h e c o u r t s . 3 S t u d e n t r i g h t s t o f a i r a n d e q u i t a b l e a p p r a i s a l o f p e r f o r m a n c e • T h e i n c r e a s i n g f o c u s o n i n d i v i d u a l r i g h t s a n d f r e e d o m s h a s h a d t w o i m p a c t s o n n u r s i n g p r o g r a m s . F i r s t , n u r s i n g p r o g r a m s c a n n o l o n g e r s e t a g e r e s t r i c t i o n s f o r a d m i s s i o n o f s t u d e n t s . T h i s l e g i s l a t i o n h a s r e s u l t e d i n a w i d e r r a n g e i n t h e a g e s o f n u r s i n g s t u d e n t s . T h e a v e r a g e a g e o f n u r s i n g s t u d e n t s s e e m s t o b e i n c r e a s i n g ( f o r e x a m p l e , a t B r i t i s h C o l u m b i a n s D o u g l a s C o l l e g e t h e a v e r a g e a g e o f n u r s i n g s t u d e n t s i n 1 9 8 4 w a s 2 8 y e a r s ) . O l d e r s t u d e n t s f e e l t h a t t h e y h a v e m o r e a t r i s k t h a n h a v e r e c e n t h i g h s c h o o l g r a d u a t e s . M a n y , f o r e x a m p l e , h a v e l e f t j o b s t o r e t u r n t o s c h o o l o r a r e o n l i m i t e d b u r s a r i e s t o c o m p l e t e t h e n u r s i n g p r o g r a m . T h e s e s t u d e n t s e x p e c t a l e v e l o f t e a c h i n g a n d a n a p p r a i s a l o f p e r f o r m a n c e w h i c h i s c o m p a r a b l e w i t h t h e i r o w n e x p e c t a t i o n s o f t h e p r o g r a m . S e c o n d , t h e p u b l i c a s a w h o l e i s d e m a n d i n g t h a t a l l i n s t i t u t i o n s p r o v i d i n g a s e r v i c e b e a c c o u n t a b l e f o r t h e q u a l i t y o f t h a t s e r v i c e . E d u c a t i o n a l i n s t i t u t i o n s , b e i n g p u b l i c i n s t i t u t i o n s , a r e i n c r e a s i n g l y b e i n g c h a l l e n g e d b y s t u d e n t s a b o u t t h e q u a l i t y o f t h e i r p r o g r a m s i n c l u d i n g t e a c h i n g a n d s u p e r v i s i o n p r o v i d e d b y 4 t h e i r f a c u l t i e s . S u c h q u e s t i o n i n g s e e m s t o o c c u r w i t h g r e a t e r f r e q u e n c y i n p r o g r a m s w h e r e t h e r e a r e s u b j e c t i v e a p p r a i s a l s o f s t u d e n t s ' p e r f o r m a n c e . I f s t u d e n t s p e r c e i v e t h e r e t o b e d i s c r e p a n c i e s b e t w e e n e v a l u a t i v e d e c i s i o n s m a d e b y e v a l u a t o r s a n d t h e i r o w n a s s e s s m e n t o f t h e i r p e r f o r m a n c e s , t h e y m a y g r i e v e a n d a p p e a l t h o s e d e c i s i o n s . S t u d e n t s ' s u c c e s s i n o v e r t u r n i n g e v a l u a t i v e d e c i s i o n s s e e m s t o b e d e p e n d e n t u p o n t h e f a i r n e s s o f t h e o r i g i n a l j u d g m e n t , t h e d e g r e e o f c o n s i s t e n c y o f a p p l i c a t i o n o f a d m i n i s t r a t i v e p r o c e d u r e s , a n d t h e k i n d s o f a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s t h a t a r e a p p l i c a b l e . I n s t i t u t i o n a l r i g h t s t o m a i n t a i n p r o g r a m s t a n d a r d s . E d u c a t i o n a l i n s t i t u t i o n s a r e f a c e d w i t h t h e n e e d t o d e v e l o p a n d i m p l e m e n t s t u d e n t g r i e v a n c e a n d a p p e a l s y s t e m s t o p r o t e c t i n s t i t u t i o n a l , f a c u l t y , a n d s t u d e n t r i g h t s . A t t h e p r e s e n t t i m e t h e r e i s a v e r y l i m i t e d a m o u n t o f r e s e a r c h i n t h e a r e a o f t h e s e s t u d e n t a c a d e m i c g r i e v a n c e s a n d a p p e a l s . T h e r e f o r e , w h e n a d m i n i s t r a t o r s a r e f a c e d w i t h t h e n e e d t o d e v e l o p a n d i m p l e m e n t t h e p r o c e d u r e s , t h e r e a r e f e w g u i d e l i n e s t o s e r v e a s a p p r o p r i a t e m o d e l s . T h i s a b s e n c e o f m o d e l s 5 a l s o p r e v e n t s t h e a c c u m u l a t i o n o f d a t a a b o u t t h e s t r u c t u r e o f g r i e v a n c e a n d a p p e a l s y s t e m s w h i c h a d d r e s s b o t h i n s t i t u t i o n a l a n d s t u d e n t r i g h t s . S t a t e m e n t o f t h e P r o b l e m T h e i n t e n t o f t h i s s t u d y i s t o d e t e r m i n e w h a t a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s e x i s t i n C a n a d i a n n u r s i n g e d u c a t i o n p r o g r a m s w i t h r e s p e c t t o t h e a s s e s s m e n t o f c l i n i c a l a p p e a l s , t o d e t e r m i n e a s p e c t s o f t h e i r e f f e c t i v e n e s s a n d t h e n t o d e r i v e r e c o m m e n d a t i o n s f o r p r a c t i c e . I n o r d e r t o s t u d y t h i s o v e r a l l p r o b l e m , s e v e r a l s u b - p r o b l e m s h a v e b e e n i d e n t i f i e d . T h e s e a r e : 1 . E x p l o r a t i o n o f t h e e x i s t i n g a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s i n C a n a d i a n n u r s i n g p r o g r a m s d e a l i n g w i t h t h e c l i n i c a l f a i l u r e o f s t u d e n t s a n d t h e a n a l y s i s o f t h e s e s t r u c t u r e s a n d p r o c e d u r e s f o r t h e p r e s e n c e o r a b s e n c e o f s e l e c t e d e l e m e n t s . 2 . D e t e r m i n a t i o n o f t h e f r e q u e n c y o f n u r s i n g s t u d e n t c l i n i c a l f a i l u r e g r i e v a n c e s a n d a p p e a l s w h i c h h a v e o c c u r r e d i n C a n a d i a n i n s t i t u t i o n s f r o m 1 9 7 8 t o 1 9 8 4 a n d t h e i d e n t i f i c a t i o n o f s t r u c t u r e s a n d p r o c e d u r e s u n d e r w h i c h t h e y a r o s e . I d e n t i f i c a t i o n o f cases w i t h known outcomes and t h e s t r u c t u r e s and p r o c e d u r e s under w h i c h they a r o s e . D e t e r m i n a t i o n o f the r e l a t i o n s h i p s among and between: (a) t h e elements of a d m i n i s t r a t i v e s t r u c t u r e and p r o c e d u r e s , (b) the i n c i d e n c e o f g r i e v a n c e s and a p p e a l s , and (c) the outcomes o f g r i e v a n c e s and a p p e a l s . E x p l o r a t i o n o f the s u b s t a n t i v e and p r o c e d u r a l i s s u e s r e l a t i n g t o a d m i n i s t r a t i v e r e v i e w s of s t u d e n t c o m p l a i n t s about e v a l u a t i v e d e c i s i o n s o f c l i n i c a l performance w i t h the s p e c i f i c a t i o n o f elements- w h i c h must be i n c l u d e d i n g u i d e l i n e s f o r such r e v i e w s . Development o f a s e t o f recommended s t r u c t u r e s an p r o c e d u r e s , based upon the knowledge d e r i v e d from the d a t a a n a l y z e d . D e t e r m i n a t i o n o f d i f f e r e n c e s between the s t u d y ' s c o n c e p t u a l Judgment P r o c e s s Model and a c t u a l p r a c t i c e s i n n u r s i n g programs. 7 O v e r v i e w o f t h e M e t h o d T h e u n d e r l y i n g f o u n d a t i o n o f t h i s s t u d y c o n s i s t s o f a s u r v e y o f C a n a d i a n n u r s i n g p r o g r a m s , w i t h t h e e x c e p t i o n o f Q u e b e c p r o g r a m s , u s i n g q u e s t i o n n a i r e s t o o b t a i n d a t a r e l a t e d t o t h e p r o g r a m s ' p r a c t i c e s a n d e x p e r i e n c e i n r e l a t i o n t o t h e c l i n i c a l e v a l u a t i o n o f s t u d e n t s a n d t o g r i e v a n c e a n d a p p e a l p r o c e s s e s w i t h i n t h e p r o g r a m a n d i n s t i t u t i o n . T h e s e p r a c t i c e s a n d e x p e r i e n c e s c a n t h e n b e c o m p a r e d t o t h e s t u d y ' s c o n c e p t u a l J u d g m e n t P r o c e s s M o d e l . P r i m a r y a n d s e c o n d a r y l e g a l l i t e r a t u r e i n t h e a r e a o f s t u d e n t a c a d e m i c d i s m i s s a l s w i l l p r o v i d e l e g a l d e c i s i o n s p e r t a i n i n g t o t h e a p p l i c a t i o n o f t h e r u l e s o f n a t u r a l j u s t i c e ( o r d u e p r o c e s s i n l a w ) f o r s t u d e n t s i n n u r s i n g e d u c a t i o n p r o g r a m s . L e g a l d e c i s i o n s w i l l t h e n b e c o m p a r e d w i t h t h e a c a d e m i c a n d a d m i n i s t r a t i v e d e c i s i o n - m a k i n g p r a c t i c e s c u r r e n t l y f o u n d i n C a n a d i a n i n s t i t u t i o n s w i t h n u r s i n g p r o g r a m s . T h i s c o m p a r i s o n w i l l s e r v e t o a s s e s s t h e a d e q u a c y o f c o m m o n p r a c t i c e s f o u n d i n p r o v i d i n g n u r s i n g s t u d e n t s w i t h t h e i r r i g h t t o n a t u r a l j u s t i c e w h e n f a c e d w i t h c l i n i c a l d i s m i s s a l . 8 D e f i n i t i o n o f T e r m s F o r t h e p u r p o s e s o f t h i s s t u d y , t e r m s u s e d w i l l m e a n t h e f o l l o w i n g : A D M I N I S T R A T I V E P R O C E D U R E S : p r e s c r i b e d c o u r s e s o f a c t i o n , b o t h w r i t t e n a n d u n w r i t t e n , d e s i g n e d t o g u i d e i n d i v i d u a l s w i t h i n a n i n s t i t u t i o n t h r o u g h f r a m e w o r k s o r s t r u c t u r e s . A D M I N I S T R A T I V E S T R U C T U R E S : p o l i c i e s a n d p r i n c i p l e s i n a n i n s t i t u t i o n w h i c h p r o v i d e d i r e c t i o n t o m e m b e r s o f t h e o r g a n i z a t i o n . A P P E A L : a c o m p l a i n t t o a s u p e r i o r c o u r t ( o r t r i b u n a l ) o f a n i n j u s t i c e d o n e b y a n i n f e r i o r o n e ( M o z l e y a n d W h i t e c l e g , 1 9 8 8 ) . A R B I T R A R Y : a l e g a l t e r m m e a n i n g " n o t d o n e o r n o t a c t i n g a c c o r d i n g t o r e a s o n o r j u d g m e n t " ( G u r a l n i k 1 9 8 2 , 2 1 1 ) . C A P R I C I O U S : a l e g a l t e r m m e a n i n g " t e n d i n g t o c h a n g e a b r u p t l y a n d w i t h o u t a p p a r e n t r e a s o n " ( G u r a l n i k 1 9 8 2 , 2 1 1 ) . 9 C L I N I C A L F A I L U R E : t h e f a i l u r e o f a n u r s i n g s t u d e n t t o m e e t c l i n i c a l p r a c t i c e s t a n d a r d s w h i c h m a y r e s u l t i n t h e i n t e r r u p t i o n o r t e r m i n a t i o n o f h i s / h e r n o r m a l p r o g r a m s e q u e n c e . D U E P R O C E S S OF L A W : a l e g a l t e r m u s e d t o m e a n t h a t n o p e r s o n s h a l l b e d e p r i v e d o f a n y r i g h t g r a n t e d h i m b y s t a t u t e , o r o t h e r w i s e , u n l e s s t h e m a t t e r c h a l l e n g e d b y t h e i n d i v i d u a l i s f i r s t a d j u d i c a t e d i n a c c o r d a n c e w i t h t h e r u l e s o f n a t u r a l j u s t i c e . E Q U I T A B L E A N D F A I R : f r e e f r o m d i s c r i m i n a t i o n ; u n p r e j u d i c e d , i m p a r t i a l , a n d j u s t ( G u r a l n i k 1 9 8 2 , 5 0 2 ) . E V A L U A T I V E D E C I S I O N : a j u d g m e n t m a d e b a s e d o n t h e w o r t h o r q u a l i t y o f p e r f o r m a n c e . G R I E V A N C E OR C O M P L A I N T : a n i n j u r y , i n j u s t i c e o r w r o n g w h i c h g i v e s g r o u n d f o r c o m p l a i n t ( V a s a n , 1 9 8 0 ) . J U D G M E N T : a u t h o r i t y t o c o m p a r e a n d m a k e d e c i s i o n s a b o u t a n i n d i v i d u a l ' s p e r f o r m a n c e a g a i n s t p r e - d e t e r m i n e d s t a n d a r d s . J U D I C I A L I N T E R V E N T I O N : a r e v i e w b y t h e c o u r t s o f d e c i s i o n s m a d e b y p u b l i c l y - l e g i s l a t e d i n s t i t u t i o n s . 1 0 N A T U R A L J U S T I C E : a l e g a l t e r m u s e d i n C a n a d a ( e q u i v a l e n t t o t e r m " d u e p r o c e s s i n l a w " ) . N U R S I N G P R O G R A M : a b a s i c p r o g r a m w h i c h p r o v i d e s t h e n e c e s s a r y c o m p e t e n c i e s f o r a s t u d e n t t o b e e l i g i b l e t o w r i t e t h e n u r s i n g r e g i s t r a t i o n e x a m i n a t i o n . N U R S I N G P R O G R A M - - B A S I C B A C C A L A U R E A T E : a n u r s i n g p r o g r a m ( o f f e r e d g e n e r a l l y i n a u n i v e r s i t y s e t t i n g ) w h i c h p r o v i d e s s u f f i c i e n t c r e d i t c o u r s e s t o m e e t r e q u i r e m e n t s f o r a b a c c a l a u r e a t e d e g r e e a s w e l l a s t h e o r e t i c a l k n o w l e d g e a n d c l i n i c a l p r a c t i c e f o r a s t u d e n t t o m e e t t h e r e g i s t r a t i o n r e q u i r e m e n t s o f t h e p r o v i n c i a l n u r s i n g a s s o c i a t i o n i n t h e p r o v i n c e i n q u e s t i o n . N U R S I N G P R 0 G R A M - - D I P L 0 M A : a n u r s i n g p r o g r a m w h i c h c a n b e p r o v i d e d i n a v a r i e t y o f i n s t i t u t i o n s w h i c h p r e p a r e s a s t u d e n t t o m e e t t h e r e g i s t r a t i o n r e q u i r e m e n t s o f t h e p r o v i n c i a l n u r s i n g a s s o c i a t i o n i n t h e p r o v i n c e i n q u e s t i o n . P R I M A R Y L E G A L L I T E R A T U R E : c o u r t r o o m t r a n s c r i p t s o f t r i a l s o r a c t u a l w r i t t e n r e p o r t s o f l e g a l d e c i s i o n s . 11 P R O C E D U R A L : a l e g a l t e r m m e a n i n g " a m e t h o d o f p r o c e e d i n g w i t h i n t h e l e g a l r i g h t s o f a n o r g a n i z a t i o n " ( B l a c k 1 9 7 9 , 1 0 8 3 ) S E C O N D A R Y L E G A L L I T E R A T U R E : w r i t t e n i n t e r p r e t a t i o n o f t h e s i g n i f i c a n c e o f l e g a l c a s e s o r a n a l y s i s o f a r e a s o f 1 a w . S U B S T A N T I V E : " o f o r r e l a t i n g t o l e g a l r i g h t s a n d p r i n c i p l e s a s d i s t i n g u i s h e d f r o m l e g a l p r o c e d u r e s " ( G u r l n i k 1 9 8 2 , 1 4 2 0 ) . L i m i t a t i o n s o f t h e S t u d y 1 . T h i s s t u d y i s l i m i t e d t o e d u c a t i o n a l i n s t i t u t i o n s w h i c h p r o v i d e e i t h e r d i p l o m a o r b a s i c b a c c a l a u r e a t e n u r s i n g p r o g r a m s . 2 . G r i e v a n c e s a n d a p p e a l s w i l l b e l i m i t e d t o t h e t i m e p e r i o d f r o m 1 9 7 8 u n t i l 1 9 8 5 a n d t o t h o s e c a s e s r e p o r t e d b y r e s p o n d e n t s t o t h i s s t u d y . 3 . T h i s s t u d y w i l l b e f u r t h e r l i m i t e d b y d e f i n i t i o n a l i n c o n s i s t e n c i e s i n t h e t e r m s " g r i e v a n c e " a n d " a p p e a l " a s t h e y a r e p e r c e i v e d o r u s e d b y p r o g r a m s i n d i f f e r e n t p r o v i n c e s . 12 4. T h i s s t u d y ' s r e v i e w o f l e g a l i n f o r m a t i o n w i l l b e l i m i t e d t o p r i m a r y a n d s e c o n d a r y l e g a l w r i t i n g s f o u n d i n e d u c a t i o n a l l e g a l j o u r n a l s . 5. L e g a l d e c i s i o n s r e n d e r e d b y a j u d g e w h o d o e s n o t p r o v i d e w r i t t e n r e a s o n s a n d w h i c h a r e n o t r e p o r t e d i n p r i m a r y l e g a l s o u r c e s w i l l n o t b e r e v i e w e d o r c o n s i d e r e d f o r t h i s s t u d y . 6. Q u e b e c i n s t i t u t i o n s w i t h n u r s i n g p r o g r a m s w e r e e x c l u d e d f r o m t h i s s t u d y b e c a u s e o f p o t e n t i a l v a r i a t i o n s b e t w e e n t h e a p p l i c a t i o n o f a d m i n i s t r a t i v e l a w i n Q u e b e c , a n d t h e a p p l i c a t i o n o f a d m i n i s t r a t i v e l a w i n a c c o r d a n c e w i t h c o m m o n l a w p r i n c i p l e s i n t h e o t h e r p r o v i n c e s o f C a n a d a . S i g n i f i c a n c e o f t h e S t u d y T h i s s t u d y w i l l p r o v i d e a t h e o r e t i c a l m o d e l t o a s s i s t e d u c a t o r s i n u n d e r s t a n d i n g t h e c o m p o n e n t s w h i c h a r e p a r t o f a n y e v a l u a t i v e d e c i s i o n r e g a r d i n g t h e p r o m o t i o n o f a s t u d e n t . S p e c i f i c a l l y , t h e j u d g m e n t m o d e l d e v e l o p e d f o r t h i s s t u d y i s e x p e c t e d t o f a c i l i t a t e a n i n c r e a s e d a w a r e n e s s o f t h e t h r e e c o m p o n e n t s o f a f a i r a n d r e a s o n a b l e e v a l u a t i o n o f 13 a s t u d e n t . An u n d e r s t a n d i n g o f the components w i l l , i t i s hoped, promote an i n c r e a s e d knowledge o f b o t h the r o l e o f and d e c i s i o n - m a k i n g powers u n d e r t a k e n by the r e v i e w e r s o f a s t u d e n t ' s c o m p l a i n t a t each l e v e l . T h i s w i l l be o f p a r t i c u l a r s i g n i f i c a n c e t o programs w h i c h have a p r a c t i c u m or c l i n i c a l component. A t t h e same time nurse e d u c a t o r s w i l l be p r o v i d e d w i t h a h e i g h t e n e d u n d e r s t a n d i n g o f the r o l e a d m i n i s t r a t i v e law p l a y s i n r e l a t i o n t o s t u d e n t c o m p l a i n t s r e g a r d i n g c l i n i c a l e v a l u a t i o n d e c i s i o n s . Such an awareness w i l l r e s u l t from the r e v i e w o f l i t e r a t u r e p e r t a i n i n g t o the t o p i c o f t h i s s t u d y . T h i s study i s a l s o e x p e c t e d t o p r o v i d e an a n a l y s i s o f a sample o f g r i e v a n c e r e v i e w s , a p p e a l h e a r i n g s , and e x t e r n a l a p p e a l s . Hence, t h i s outcome w i l l be o f p a r t i c u l a r i m p o r t a n c e t o nurse e d u c a t o r s i n r e l a t i o n t o t h e i r p e r c e i v e d v u l n e r a b i l i t y t o l e g a l a c t i o n by s t u d e n t s whom they have f a i l e d . A nother outcome o f t h i s study w i l l be a s e t of g u i d e l i n e s p e r t a i n i n g t o g r i e v a n c e and a p p e a l h e a r i n g s . 14 T h e s e g u i d e l i n e s m a y b e u s e d b y e d u c a t i o n a l i n s t i t u t i o n s t o e v a l u a t e t h e i r c u r r e n t p o l i c i e s a n d / o r p r o c e d u r e s f o r t h e a b o v e . O n l y a b e g i n n i n g o f a n e x p l o r a t o r y n a t u r e c a n b e a t t e m p t e d b y t h i s s t u d y i n a p r e v i o u s l y u n r e s e a r c h e d a r e a . A s i g n i f i c a n t o u t c o m e w i l l b e t h e p r o v i s i o n o f a b e g i n n i n g f r a m e w o r k f o r t h e " m a p p i n g " o f t h e p r e s e n t s t r u c t u r e s a n d p r a c t i c e s u t i l i z e d w i t h i n C a n a d i a n n u r s i n g p r o g r a m s . S p e c i f i c a l l y t h o s e u s e d d u r i n g t h e f o r m u l a t i o n a n d r e v i e w o f s t u d e n t s ' p e r f o r m a n c e i n c l i n i c a l s e t t i n g s a n d - s u b s e q u e n t l e v e l s o f r e v i e w s , o f t h e s e d e c i s i o n s , p r o v i d e d b o t h w i t h i n a n d w i t h o u t n u r s i n g p r o g r a m s . I t i s e x p e c t e d t h a t s u b s e q u e n t s t u d i e s w i l l c a r r y t h i s i n v e s t i g a t i o n f u r t h e r . 15 C H A P T E R 2 R E V I E W O F T H E L I T E R A T U R E T h e l i t e r a t u r e s u r v e y e d w a s d r a w n f r o m f o u r a r e a s : h e a l t h s c i e n c e s , h i g h e r e d u c a t i o n , l e g a l d e c i s i o n s a n d l e g a l w r i t i n g s i n b o t h C a n a d a a n d t h e U n i t e d S t a t e s . T h e s e a r e p r e s e n t e d i n t h r e e s e c t i o n s i n t h i s c h a p t e r . H e a l t h S c i e n c e s L i t e r a t u r e T h e l i t e r a t u r e f r o m t h i s a r e a i s p r i m a r i l y r e l a t e d t o n u r s i n g e d u c a t i o n p r o g r a m s . W h e n a n a l y z e d , t h i s l i t e r a t u r e r e v e a l s t w o g e n e r a l a r e a s . I n t h e f i r s t a r e a s i x f a c t o r s w h i c h a p p e a r p o t e n t i a l l y t o a f f e c t t h e a s s e s s m e n t o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e w e r e i d e n t i f i e d . A n d i n t h e s e c o n d a r e a t h r e e f o c i r e l a t e d t o e v a l u a t i o n p r o c e s s a n d r e v i e w w e r e i d e n t i f i e d . 1 6 F a c t o r s A f f e c t i n g A s s e s s m e n t o f S t u d e n t s ' C l i n i c a l P e r f o r m a n c e ^ ' T h e s e f a c t o r s a r e : ( 1 ) t h e p a r t i c u l a r v a r i a b l e s s e l e c t e d t o m e a s u r e s t u d e n t s ' " p e r f o r m a n c e ; ( 2 ) t h e r e l a t i o n s h i p b e t w e e n t h e c o m p l e x i t y o f s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e e x p e c t a t i o n s a n d t h e d e g r e e o f s u b j e c t i v i t y o f a p p r a i s a l s ; ( 3 ) e v a l u a t o r s L e x p e c t a t i o n s o f s t u d e n t s ' ' p r o f e s s i o n a l s o c i a l i z a t i o n ; ( 4 ) e v a l u a t o r s 1 ' e x p e r t i s e i n a s s e s s m e n t o f s t u d e n t s ' p e r f o r m a n c e ; ( 5 ) d e g r e e o f i n t e r - a n d i n t r a - r a t e r r e l i a b i l i t y o f e v a l u a t o r s ' a s s e s s m e n t o f s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e ; a n d ( 6 ) p e r s o n a l v a l u e s o f e v a l u a t o r s . E a c h o f t h e s e f a c t o r s c a n l e a d t o d i s t o r t i o n s i n e v a l u a t o r s 1 p e r c e p t i o n s o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e . D i s t o r t i o n s i n a p p r a i s a l s m a y , i n t u r n , l e a d t o c h a r g e s b y s t u d e n t s o f u n f a i r o r i n e q u i t a b l e e v a l u a t i v e j u d g m e n t s . S e l e c t i o n o f v a r i a b l e s t o m e a s u r e s t u d e n t p e r f o r m a n c e . M a n y w r i t e r s h a v e p r e s e n t e d i n c o n s i s t e n t v i e w s a b o u t w h i c h v a r i a b l e s s h o u l d b e a s s e s s e d d u r i n g s t u d e n t s ' - c l i n i c a l e x p e r i e n c e s . A n g u s s t a t e s t h a t : 1 7 . . . p r o p o n e n t s o f t h e m o r e r e c e n t l y d e v e l o p e d b e h a v i o u r a l r a t i n g s c a l e s e x p r e s s t h e n e e d t o a s s e s s p e r f o r m a n c e i n t e r m s o f b e h a v i o u r s w h i c h a r e c r i t i c a l t o j o b s u c c e s s o r f a i l u r e . ( A n g u s 1 9 8 0 , 5 ) J o b s u c c e s s i s v i e w e d a s b e i n g d e p e n d e n t o n s t u d e n t s ' a b i l i t i e s t o " i n t e g r a t e l e a r n i n g , a p p l y t h e o r y t o p r a c t i c e , a c q u i r e p s y c h o m o t o r s k i l l s , a n d m a k e t h e t r a n s i t i o n f r o m n u r s i n g s t u d e n t t o p r o f e s s i o n a l p e r s o n " ( B e v i l a n d G r o s s 1 9 8 1 , 6 5 8 ) . F o r e x a m p l e , A d d e r l y ( 1 9 7 7 ) p o i n t s o u t t h a t s u c h e m p h a s i s o n j o b s k i l l s h a s r e s u l t e d i n a p r e o c c u p a t i o n w i t h s t u d e n t s ' " p r o b l e m - s o l v i n g s k i l l s , i n c l u d i n g : a s s e s s m e n t o f r e a s o n i n g s k i l l s , s k i l l s i n p r o b l e m i d e n t i f i c a t i o n , a n d t e c h n i c a l s k i l l s . B r u n e r ( 1 9 7 8 ) c a u t i o n s a b o u t a p r e o c c u p a t i o n w i t h p r o b l e m - s o l v i n g s k i l l s . S h e e m p h a s i z e s t h a t p r o b l e m - s o l v i n g s k i l l s m u s t b e i n t e g r a t e d i n t o t h e c o n t e x t o f p a t i e n t c a r e . O n t h e o t h e r h a n d , p e r f o r m a n c e s h o u l d n o t b e r e s t r i c t e d t o t h e a b o v e v a r i a b l e s b u t s h o u l d a l s o i n c l u d e a p p e a r a n c e a n d d e p o r t m e n t o b j e c t i v e s ( F r i s b i e , 1 9 7 9 ) . H o w e v e r , t h e s e l a t t e r v a r i a b l e s s h o u l d n o t b e g r a d e d a s t a u g h t a s p e c t s o f a c o u r s e a r e ( F r i s b i e , 1 9 7 9 ) a n d t h e o v e r a l l 1 8 c o m p e t e n c y o f s t u d e n t s s h o u l d b e m e a s u r e d o n t h e b a s i s o f t h e i r c o n s i s t e n c y i n p e r f o r m i n g s k i l l s ( B o n d y , 1 9 8 3 ) . A l l i n a l l t h e r e i s a w i d e d i s p a r i t y i n w h a t s h o u l d b e e v a l u a t e d d u r i n g c l i n i c a l e x p e r i e n c e f o r n u r s i n g s t u d e n t s w i t h f e w w r i t e r s a g r e e i n g o n w h i c h v a r i a b l e s h a v e t h e g r e a t e s t m e r i t i n a s s e s s i n g p e r f o r m a n c e . R e l a t i o n s h i p b e t w e e n c o m p l e x i t y o f p e r f o r m a n c e , e x p e c t a t i o n s a n d d e g r e e o f s u b j e c t i v i t y o f a p p r a i s a l s . A s s e s s m e n t o f c l i n i c a l p e r f o r m a n c e o f n u r s i n g s t u d e n t s i s c o n s i d e r e d t o b e d i f f i c u l t b e c a u s e o f n u r s i n g ' s " c o m p l e x g o a l s " r e q u i r i n g a c h i e v e m e n t v i a c o m p l e x s t r a t e g i e s . A " c o m p l e x g o a l " i s a g o a l w h i c h h a s " m u l t i p l e i n t e r l o c k i n g c r i t e r i a i n c l u d i n g s o m e t h a t a r e h i g h l y a b s t r a c t i n n a t u r e " ( S a d l e r 1 9 8 3 , 6 1 ) . C o m p l e x s t r a t e g i e s a r e t h o s e i n v o l v i n g " m u l t i p l e d e c i s i o n p o i n t s b e c a u s e a l t e r n a t i v e c o u r s e s o f a c t i o n a r e p o s s i b l e " ( S a d l e r 1 9 8 3 , 6 1 ) . E v a l u a t i o n o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e i s c o n s i d e r e d t o r e f l e c t b o t h c o m p l e x g o a l s a n d c o m p l e x s t r a t e g i e s b e c a u s e s t u d e n t s a r e r e q u i r e d t o p l a n t h e i r p a t i e n t s ' c a r e , u s i n g n u m e r o u s s t e p s , w h i c h m u s t a c h i e v e s p e c i f i e d o u t c o m e s . S t e p s s t u d e n t s u s e t o p l a n a n d t o i m p l e m e n t t h e s e g o a l s 1 9 c a n b e w i d e l y d i v e r g e n t b a s e d o n t h e e m p h a s e s t h e y c h o o s e t o s t r e s s f o r t h e i r p a t i e n t s . T h e s e e m p h a s e s o f t e n e v o l v e f r o m p s y c h o s o c i a l a s p e c t s o f c a r e p l a n n i n g . F i v e s u c h g o a l s w h i c h e v a l u a t o r s m u s t a s s e s s a r e : " c a r i n g a b o u t p a t i e n t s , c o o p e r a t i v e n e s s w i t h c o - w o r k e r s , c o n f i d e n c e , r e s o u r c e f u l n e s s , a n d d e p e n d a b i l i t y " ( G o r d o n 1 9 7 8 , 6 9 ) . T h e s e g o a l s a r e f r e q u e n t l y i d e n t i f i e d i n t h e s u b j e c t i v e e v a l u a t i o n o f s t u d e n t s . B u t w h e n t h e e v a l u a t i n g p r a c t i c e s o f n u r s i n g e d u c a t o r s w e r e a s s e s s e d , t h e r e w a s a f r e q u e n t g a p b e t w e e n h o w s t u d e n t s p e r f o r m e d a n d w h a t e v a l u a t o r s d o c u m e n t e d a b o u t t h e i r p e r f o r m a n c e ( W o o d , 1 9 7 1 ) . T h e s e g a p s w e r e s a i d t o b e d u e t o t h e s u b j e c t i v e n a t u r e o f s t u d e n t s ' ' p e r f o r m a n c e . B e c a u s e o f t h i s s u b j e c t i v i t y , . . . o b j e c t i v e m e a s u r e m e n t t o o l s o f c l i n i c a l e x p e r i e n c e a r e d i f f i c u l t t o d e v e l o p . T h e r i s k s o f s u b j e c t i v e m e a s u r e m e n t c a n n o t o f f s e t t h e n e c e s s i t y t o o b t a i n i n f o r m a t i o n o n s t u d e n t p e r f o r m a n c e a n d p r o b l e m s . T h u s e v e r y e f f o r t s h o u l d b e m a d e t o g e t g o o d i n f o r m a t i o n . ( W o o d 1 9 7 1 , 2 6 ) 20 T h i s p r o b l e m o f d o c u m e n t a t i o n m a y n o t b e d u e s o l e l y t o t h e d i f f i c u l t y o f m e a s u r i n g a f f e c t i v e b e h a v i o u r s . S a y l o r ( 1 9 8 7 ) c o n d u c t e d a s t u d y o f s t u d e n t s ' - a n d n u r s e e d u c a t o r s ' " a t t i t u d e s t o w a r d e v a l u a t i o n . S h e i d e n t i f i e d f o u r c a t e g o r i e s o f a c t i v i t i e s i n w h i c h s t u d e n t s a r e e x p e c t e d t o d e m o n s t r a t e a l e v e l o f p r o f i c i e n c y : t e c h n i c a l , p s y c h o s o c i a l , p l a n n i n g , a n d c o l l a b o r a t i o n . S e n i o r s t u d e n t s r e p o r t e d t h a t t h e y b e l i e v e d t h e e v a l u a t i o n o f t h e i r t e c h n i c a l a n d p l a n n i n g s k i l l s w a s l e s s s o u n d l y b a s e d , w h i l e j u n i o r s t u d e n t s r e p o r t e d t h a t t h e y b e l i e v e d t h e e v a l u a t i o n o f t e c h n i c a l s k i l l s t o b e t h e m o s t s o u n d l y b a s e d . I t w a s s u g g e s t e d t h a t t h e s e a l t e r n a t i v e v i e w s w e r e l i k e l y a r e s u l t o f t h e i n c r e a s i n g c o m p l e x i t y o f t e c h n i c a l s k i l l s a s s t u d e n t s p r o g r e s s i n n u r s i n g p r o g r a m s . S a y l o r c o n c l u d e d t h a t " s t u d e n t s m a y e x p e c t l e s s v a l i d f e e d b a c k o r i n s t r u c t o r s m a y b e l e s s s k i l l e d a t p r o v i d i n g s o u n d e v a l u a t i o n s o f a c t i v i t i e s s u c h a s c o u n s e l l i n g , t e a c h i n g , a n d t e a m w o r k " ( 1 9 8 7 , 1 1 8 ) . I t f o l l o w s t h a t i n c r e a s i n g c o m p l e x i t y i n s t u d e n t s ' " p e r f o r m a n c e a s t h e y p r o g r e s s t h r o u g h p r o g r a m s s e e m s t o i n c r e a s e t h e d i f f i c u l t y e v a l u a t o r s h a v e i n d o c u m e n t i n g s p e c i f i c p e r f o r m a n c e . D o c u m e n t a t i o n d i f f i c u l t i e s m a y a l s o r e l a t e t o t h e d i f f i c u l t y i n 2 1 a s s e s s i n g h o w s t u d e n t s f o r m u l a t e c l i n i c a l d e c i s i o n s . M c F a d d e n c o n d u c t e d a s t u d y t o a s s e s s h o w s t u d e n t s m a k e c l i n i c a l d e c i s i o n s . S h e a t t r i b u t e d p a r t o f t h e p r o b l e m i n a s s e s s i n g s t u d e n t s ' d e c i s i o n - m a k i n g t o a l a c k o f i n f o r m a t i o n " a b o u t h o w i n d i v i d u a l s p e r c e i v e a n d p r o c e s s i n f o r m a t i o n n e c e s s a r y t o m a k e a n i n f o r m e d d e c i s i o n " ( 1 9 8 6 , 4). T h e r e f o r e , n o t o n l y i s t h e c o m p l e x i t y o f t h e g o a l s w i t h w h i c h s t u d e n t s h a v e t o d e a l a p r o b l e m i n d o c u m e n t i n g p e r f o r m a n c e b u t s o a l s o i s t h e l a c k o f a n u n d e r s t a n d i n g a b o u t t h e p r o c e s s s t u d e n t s u s e t o m a k e c l i n i c a l d e c i s i o n s . T h e s e f a c t o r s m a y b e i n t e r f e r i n g w i t h t h e a c c u r a t e m e a s u r e m e n t o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e . T h e o v e r a l l e v a l u a t i o n p r o b l e m . . . i s m a k i n g a s u b j e c t i v e j u d g m e n t a b o u t t h e m e a n i n g f u l n e s s o f t h e w h o l e , b o t h , f r o m t h e p a r t s t h a t a r e m e a s u r a b l e , a n d f r o m t h o s e t h a t m u s t b e a s s e s s e d i n t u i t i v e l y . ( W o o l l e y 1 9 7 7 , 3 1 4 ) T h u s i t a p p e a r s t h a t g o a l s i n t h e a f f e c t i v e d o m a i n a n d t h o s e w h i c h a r e c o m p o s e d o f s e v e r a l i n t e r - r e l a t e d a s p e c t s m a y l e a d t o d i f f i c u l t i e s i n t h e a s s e s s m e n t o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e . G i v e n t h e a b o v e w e a k n e s s e s , h o w m u c h w e i g h t s h o u l d s u c h 22 e v a l u a t i o n s h a v e i n d e t e r m i n i n g s t u d e n t p r o m o t i o n ? F a c u l t y s h o u l d u s e o n l y s u b j e c t i v e k n o w l e d g e r a t i n g s w h i c h h a v e b e e n s h o w n t o b e " r e l i a b l e a n d v a l i d " b e f o r e t h e y a r e u s e d i n t h e d e t e r m i n a t i o n o f t h e p r o m o t i o n o f s t u d e n t s ( M a r i e n f e l d , 1 9 8 0 ) . E v a l u a t o r s ' p r o f e s s i o n a l s o c i a l i z a t i o n e x p e c t a t i o n s o f s t u d e n t s . N u r s i n g i n s t r u c t o r s f r e q u e n t l y u s e t h e i r o w n e x p e r i e n c e s a s t h e b a s i s f o r t h e i r i n t e r p r e t a t i o n o f s t u d e n t s ' p e r f o r m a n c e . " E v e n t h e b e s t - d e f i n e d b e h a v i o r a l o b j e c t i v e i s d e p e n d e n t o n t h e p e r c e p t i o n o f t h e i n t e r p r e t e r " ( B a r r i t t 1 9 7 0 , 4 0 ) . P e r c e p t i o n i s u s e d b e c a u s e . . . [ t ] h e t h e o r y i s l a c k i n g t h a t w o u l d t e l l u s h o w t o a r r i v e a t m i n i m u m s t a n d a r d s , h o w t o s e t a c r i t e r i o n s c o r e , o r h o w t o j u d g e t h e q u a l i t y o f a c r i t e r i o n - r e f e r e n c e d t e s t i t e m . ( F r i s b i e l 9 7 9 , 6 ) T h u s , n o m a t t e r w h i c h t y p e o f e v a l u a t i o n s y s t e m i s u s e d , t h e r e w i l l a l w a y s b e p r o b l e m s i n a c c u r a t e i d e n t i f i c a t i o n o f m e a s u r a b l e s t a n d a r d s b y w h i c h t o c o m p a r e s t u d e n t s 1 p e r f o r m a n c e . E d u c a t o r s m u s t r e l y o n t h e i r o w n n u r s i n g p r a c t i c e e x p e r i e n c e s t o a d j u d i c a t e t h e i r s t u d e n t s ' - p e r f o r m a n c e s ( M i k s a n e k , 1 9 8 0 ) . J u s t a s 2 3 i n s t r u c t o r s u s e t h e i r o w n e x p e r i e n c e t o a s s e s s o t h e r s ' p e r f o r m a n c e , s t u d e n t s a l s o p r o v i d e c a r e u s i n g t h e i r o w n t h e o r e t i c a l k n o w l e d g e a s a g u i d e . U n l i k e s t u d e n t s w i t h l i m i t e d e x p e r i e n c e , i n s t r u c t o r s w h o a r e " e x p e r t n u r s e s " a r e a b l e t o r e f i n e t h e i r o w n " t h e o r y t h r o u g h a n a l y s e s o f p e r s o n a l , p r o v e n e x p e r i e n c e s " ( d e l B u e n o 1 9 8 3 , 7 ) . E d u c a t o r s 1 ' i n t e r p r e t a t i o n o f s t u d e n t s ' p e r f o r m a n c e s a r e n o t b a s e d o n s t u d e n t s ' ' a b i l i t y t o p r o v i d e c a r e b u t o n h o w e d u c a t o r s w o u l d p r o v i d e c a r e . T h u s , " m o s t n u r s i n g s t u d e n t s h a v e a c q u i r e d t h e a t t i t u d e t h a t t h e y m u s t c o m p e t e n t l y d e m o n s t r a t e t h e i r k n o w l e d g e a n d c l i n i c a l s k i l l s w i t h o u t a n y m a r g i n f o r e r r o r " ( G r i f f i t h a n d B a k a n a u s k a s 1 9 8 3 , 1 0 5 ) . E d u c a t o r s a l s o e x p e r i e n c e r o l e c o n f l i c t s ( A n g u s , 1 9 8 0 ) . C o n f l i c t s a r i s e f r o m t h e v a r i o u s p a r t i e s e d u c a t o r s a r e a c c o u n t a b l e t o : t h e s t u d e n t , t h e e d u c a t i o n a l s y s t e m , t h e a g e n c y , a n d t h e e m p l o y i n g i n s t i t u t i o n ( C u r r y 1 9 8 1 , 6 5 ) . T h i s c o n f l i c t i s s t r o n g e s t a s t h e " e x p e r t n u r s e " m o v e s f r o m t h e r o l e o f p r a c t i t i o n e r t o t h a t o f i n s t r u c t o r . W i t h o u t e d u c a t i o n a l p r e p a r a t i o n t o a c c o m m o d a t e t h i s t r a n s i t i o n , n u r s e s L e x p e c t a t i o n o f s t u d e n t s ' ' p r o f e s s i o n a l b e h a v i o u r m a y b e b e y o n d t h e r e a s o n a b l e e x p e c t a t i o n o f p e r f o r m a n c e 2 4 a t s p e c i f i c l e v e l s i n t h e e d u c a t i o n a l p r o g r a m ( I n f a n t e 1 9 8 6 , 9 5 ) . C o n s e q u e n t l y , t h e m o r e e d u c a t o r s h a v e b e e n a s s i s t e d i n t h e i r r o l e t r a n s i t i o n f r o m p r a c t i t i o n e r t o e d u c a t o r , t h e l e s s l i k e l y t h e i r p e r s o n a l r o l e e x p e c t a t i o n s w i l l b e t o i n t e r f e r e w i t h t h e i r o b j e c t i v e a s s e s s m e n t o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e . E v a l u a t o r e x p e r t i s e i n t h e u s e o f a s s e s s m e n t t o o l s - S e v e r a l w r i t e r s h a v e i d e n t i f i e d w e a k n e s s e s w i t h b o t h t h e s t r u c t u r e o f a s s e s s m e n t t o o l s a n d t h e u s e o f t h e s e t o o l s . O n e o f t h e r e a s o n s a d v a n c e d f o r i n e f f e c t i v e a p p r a i s a l s y s t e m s i s " t h a t d i f f e r e n t o r g a n i z a t i o n s h a v e d i f f e r e n t p h i l o s o p h i e s o f e v a l u a t i o n " ( A n g u s 1 9 8 0 , 1 2 ) . T h u s , d u e s o l e l y t o t h e i r l a c k o f f a m i l i a r i t y w i t h t h e n e w s y s t e m , f a c u l t y m e m b e r s n e w t o a p r o g r a m m a y h a v e d i f f i c u l t y e v a l u a t i n g s t u d e n t s . O t h e r r e a s o n s c i t e d a r e t h e s u b j e c t i v i t y o f t h e t o o l s , a n d i n s t r u c t o r s w h o a r e " i n a d e q u a t e l y p r e p a r e d i n t h e t a s k o f w r i t i n g a s s e s s m e n t s " ( W o o d 1 9 7 1 , 2 1 ) . M o s t g r a d u a t e p r o g r a m s f o r n u r s i n g e d u c a t i o n d o n o t a p p e a r t o . p r o v i d e p r e p a r a t i o n o f s t u d e n t s i n c l i n i c a l i n s t r u c t i o n . I n s t e a d . . . . " n u r s i n g h a s a d o p t e d t h e c o n t r o v e r s i a l p r a c t i c e o f o t h e r d i s c i p l i n e s o f h i r i n g i n d i v i d u a l s w i t h s u b j e c t m a t t e r e x p e r t i s e b u t n o t t e a c h e r 2 5 p r e p a r a t i o n " ( K a r u h i j e 1 9 8 6 , 1 4 4 ) . Y e t , c l i n i c a l i n s t r u c t o r s a r e v i e w e d b y s t u d e n t s a s t h e m o s t i m p o r t a n t f a c t o r i n t h e i r s u c c e s s ( D a v i d h i z a r 1 9 8 5 , 2 8 8 ) . T h e i s s u e o f e x p e r t i s e i n c l i n i c a l e v a l u a t i o n i s n o t n e w ; W o o l l e y w r o t e , " o v e r t h e y e a r s . . . . e d u c a t o r s h a v e e n t h u s i a s t i c a l l y e m b r a c e d v a r i o u s a p p r o a c h e s t o t h e p r o b l e m , o n l y t o d r o p e a c h o n e w h e n a m o r e p r o m i s i n g a l t e r n a t i v e w a s d e v e l o p e d " ( 1 9 7 7 , 3 0 8 ) . T h e r e f o r e , i f e f f e c t i v e c l i n i c a l a s s e s s m e n t t o o l s a r e d i f f i c u l t t o d e v e l o p a n d i f n u r s e e d u c a t o r s a r e n o t a d e q u a t e l y p r e p a r e d t o a s s e s s s t u d e n t p e r f o r m a n c e c l i n i c a l l y , t h e n t h e a c c u r a t e a d j u d i c a t i o n o f s t u d e n t s ' ' c l i n i c a l p e r f o r m a n c e i s o p e n t o i n t e r p r e t a t i o n , n o t w i t h s t a n d i n g t h e f a c t t h a t s t u d e n t s i d e n t i f y t h e i r c l i n i c a l i n s t r u c t o r a s t h e m o s t i m p o r t a n t f a c t o r i n t h e i r s u c c e s s ( D a v i d h i z a r 1 9 8 5 , 2 8 8 ) . D e g r e e o f i n t e r - a n d i n t r a - r a t e r r e l i a b i l i t y o f s t u d e n t c l i n i c a l a p p r a i s a l s . T h e q u e s t i o n a r i s e s a s t o t h e r e l i a b i l i t y o f c l i n i c a l a p p r a i s a l s b o t h b e t w e e n e d u c a t o r s a n d w i t h i n s t u d e n t g r o u p s . C o n s i d e r i n g t h e e a r l i e r d i s c u s s i o n o f t h e i n f l u e n c e o f e v a l u a t o r s 1 o w n e x p e r i e n c e o n t h e i r i n t e r p r e t a t i o n o f s t u d e n t s 1 ' p e r f o r m a n c e , i t c o u l d b e a s s u m e d t h a t t h e r e i s a s t r o n g 2 6 p r o b a b i l i t y f o r l o w s t a n d a r d s o f b o t h i n t r a - a n d i n t e r - r a t e r r e l i a b i l i t y . I n c o n t r a s t e d u c a t o r s w o u l d l i k e t o b e l i e v e t h a t : G i v e n t h e s a m e c o u r s e o b j e c t i v e s , e v a l u a t i o n c r i t e r i a a n d i d e n t i c a l d a t a , t h e c o m p e t e n t n u r s e e d u c a t o r w o u l d l i k e t o b e a b l e t o a s s u m e t h a t a n y o t h e r c o m p e t e n t n u r s e e d u c a t o r w o u l d u l t i m a t e l y r e a c h t h e s a m e c o n c l u s i o n . ( B r o z e n e c a n d o t h e r s 1 9 8 7 , 4 3 ) J o h n s o n a n d W i l h i t e c a r r i e d o u t a s t u d y o f t h e r e l i a b i l i t y a n d v a l i d i t y o f s u b j e c t i v e e v a l u a t i o n s i n b a c c a l a u r e a t e n u r s i n g p r o g r a m s . T h e y f o u n d t h a t , p r o v i d e d " s t a t e d o b j e c t i v e s o r o u t c o m e s w e r e u s e d a s t h e r a n k i n g c r i t e r i o n , " s u b j e c t i v e a p p r a i s a l s s e e m e d t o b e r e l i a b l e ( 1 9 7 3 , 2 6 0 ) . H a v i n g s t a t e d o u t c o m e s i s n o t s u f f i c i e n t t o e n s u r e r e l i a b i l i t y . C l i n i c a l i n s t r u c t o r s a l s o " n e e d g r e a t e r e x p e r t i s e a n d t r a i n i n g i n o b s e r v a t i o n a l s k i l l s t o i m p r o v e i n t e r a n d i n t r a - r a t e r r e l i a b i l i t y " ( I r b y 1 9 7 8 , 2 2 ) . T h e r e f o r e , t h e d e g r e e o f r e l i a b i l i t y a n d v a l i d i t y o f a p p r a i s a l s s e e m s t o b e d e p e n d e n t o n t h e c l a r i t y o f c l i n i c a l o b j e c t i v e s t o b e a s s e s s e d a n d i n s t r u c t o r s ' e x p e r t i s e i n m a k i n g o b s e r v a t i o n s r e l a t e d t o t h e s e o b j e c t i v e s . 2 7 I n f l u e n c e o f p e r s o n a l v a l u e s o f e v a l u a t o r s o n c l i n i c a l a p p r a i s a l s . J u s t a s e v a l u a t o r s ' p r a c t i c e e x p e r i e n c e s c a n t i n g e t h e i r a s s e s s m e n t s o f s t u d e n t s ' ' p e r f o r m a n c e , s o c a n e v a l u a t o r s ' p e r s o n a l v a l u e s y s t e m s ( J e n k i n s 1 9 8 5 ; F o w l e r a n d H e a t e r 1 9 8 3 ) . T h u s , i n s t r u c t o r s ' o w n v a l u e s c a n l e a d t o c h a r g e s o f " p e r s o n a l i t y c o n f l i c t " b y s t u d e n t s . I n s t r u c t o r s n e e d t o i d e n t i f y s i t u a t i o n s w h e r e t h e i r p e r c e p t i o n s a r e d i f f e r e n t f r o m t h o s e o f t h e i r s t u d e n t s a n d t o e x p l o r e w h a t i s t h e b a s i s o f t h e s e d i f f e r e n c e s ( B r o z e n e c a n d o t h e r s , 1 9 8 7 ) . T h e p e r s o n a l i t i e s o f e v a l u a t o r s a n d s t u d e n t s f r e q u e n t l y i n f l u e n c e t h e i r i n t e r a c t i o n s : T e a c h e r s a r e f a l l i b l e h u m a n b e i n g s a n d m o s t r e a l i z e t h a t t h e y - w o r k m o r e e f f e c t i v e l y w i t h s o m e t y p e s o f s t u d e n t s t h a n o t h e r s . W h a t i s c o m m o n l y t e r m e d a " p e r s o n a l i t y c o n f l i c t " i s u s u a l l y a m i s u n d e r s t a n d i n g b e t w e e n t w o p e r s o n s w h o v i e w a s i t u a t i o n d i f f e r e n t l y . ( d e T o r n y a y 1 9 8 5 , 3 1 3 ) C o n s e q u e n t l y , e d u c a t o r s n e e d t o b e a w a r e o f t h e i m p a c t t h a t t h e i r p e r s o n a l v a l u e s y s t e m s c a n h a v e d u r i n g t h e e v a l u a t i o n p r o c e s s , e s p e c i a l l y i n s i t u a t i o n s w h e r e t h e y 2 8 h a v e d i f f i c u l t y f i n d i n g p o s i t i v e a s p e c t s o f p a r t i c u l a r s t u d e n t s ' " p e r f o r m a n c e ( C a r p e n i t o , 1 9 8 3 ) . F o c i R e l a t e d t o E v a l u a t i o n P r o c e s s a n d R e v i e w A b r o a d e r a n a l y s i s o f t h e l i t e r a t u r e i d e n t i f i e d t h r e e g e n e r a l f o c i : ( a ) a p p r o a c h e s t o t h e e v a l u a t i o n p r o c e s s , ( b ) s t u d e n t g r i e v a n c e s a n d a p p e a l s o f e v a l u a t i v e d e c i s i o n s , a n d ( c ) l e g a l i m p l i c a t i o n s o f s t u d e n t e v a l u a t i o n s . A p p r o a c h e s t o t h e e v a l u a t i o n p r o c e s s . T h o r n e p r e s e n t e d a c r i t i c a l r e v i e w o f s e v e r a l a p p r o a c h e s t o e v a l u a t i o n . H e c a u t i o n e d t h a t n o r m - r e f e r e n c e d t e s t s w e r e n o t a p p r o p r i a t e f o r n u r s i n g , a s n u r s i n g p r o g r a m s r e q u i r e s t u d e n t s t o " h a v e a c o m p e t e n c e l e v e l o r m i n i m u m s t a n d a r d t h a t e a c h m u s t a t t a i n a n d l o w s c o r e s r e p r e s e n t i n g i n s u f f i c i e n t c o m p e t e n c y [ c o u l d ] n o t [ b e ] t o l e r a t e d " ( 1 9 8 3 , 8 ) . I n s t e a d h e a d v o c a t e d t h e a d o p t i o n o f c r i t e r i o n - r e f e r e n c e d a p p r o a c h e s : h i s p o s i t i o n w a s a l s o s u p p o r t e d b y B o n d y , w h o a r g u e d t h a t " w h e n t h e c r i t e r i a a r e t h e c o m m o n b a s e f o r d i s c u s s i o n b e t w e e n s t u d e n t a n d i n s t r u c t o r , t h e s t u d e n t l e a r n s t o s e l f - e v a l u a t e a n d t o v a l i d a t e s e l f - p e r c e p t i o n s o f p e r f o r m a n c e " ( 1 9 8 3 , 3 8 1 ) . 2 9 T h o r n e ( 1 9 8 3 ) a l s o d i s c u s s e d t h e a p p l i c a t i o n o f m a s t e r y l e a r n i n g t o s e l f - d i r e c t e d k n o w l e d g e a c q u i s i t i o n . S u c h l e a r n i n g i s b a s e d o n w h e t h e r o r n o t s t u d e n t s m e e t e x p e c t e d o u t c o m e s . C o n s e q u e n t l y , t h e n e e d t o d e t e r m i n e s p e c i f i c g r a d e s f o r c l i n i c a l c o u r s e s i s a v o i d e d . T h o r n e ( 1 9 8 3 ) a n . d B o n d y ( 1 9 8 3 ) a r e n o t t h e o n l y w r i t e r s s u g g e s t i n g n o n g r a d i n g s y s t e m a p p r o a c h e s t o e v a l u a t i o n . B a r r i t t a n d I r i o n ( 1 9 7 0 ) s u p p o r t e d s u c h a n a p p r o a c h , d u e t o t h e s u b j e c t i v i t y i n a p p r a i s a l s o f s t u d e n t s ' ' p e r f o r m a n c e s . T h e y s t a t e d t h a t : . . . . e v e n t h e b e s t - d e f i n e d b e h a v i o r a l o b j e c t i v e i s d e p e n d e n t o n t h e p e r c e p t i o n o f t h e i n t e r p r e t e r . R a t h e r t h a n j u s t i f y i n g t h e i n s t r u c t o r ' s s u b j e c t i v e v a l u e s . . . . w e s h o u l d c o n c e n t r a t e o n w h a t t h e s t u d e n t ' s b e h a v i o r i n d i c a t e s a b o u t h e r . . . . b e h a v i o r w h i c h h a s b e e n i d e n t i f i e d a s c o n s i s t e n t w i t h f i r s t - l e v e l p r o f e s s i o n a l n u r s i n g p r a c t i c e . ( B a r r i t t a n d I r i o n 1 9 7 0 , 4 0 ) B a s e d o n a s t u d y c o n d u c t e d b y H i l t o n , n o m a t t e r w h i c h a p p r o a c h i s u s e d , n o r e l a t i o n s h i p b e t w e e n t h e o r y c o u r s e g r a d e s a n d c l i n i c a l e x p e r i e n c e e v a l u a t i o n s e x i s t s . T o o v e r c o m e t h i s p r o b l e m , s h e s u g g e s t s " a n e e d f o r a w i d e v a r i e t y o f t e s t i n g p r o c e d u r e s i n o r d e r t o 3 0 g e t a f u l l p i c t u r e o f t h e s t u d e n t s L a b i l i t i e s r e l a t e d t o n u r s i n g " ( 1 9 8 0 , 2 7 ) . A f u r t h e r p r o b l e m r e l a t e s t o t h e s e l e c t i o n o f t o o l s t o m e e t H i l t o n L s s p e c i f i c a t i o n s . A l t h o u g h t h e l i t e r a t u r e p r o v i d e s e x a m p l e s o f t o o l s d e v e l o p e d t o f a c i l i t a t e m o r e e f f e c t i v e d o c u m e n t a t i o n o f s t u d e n t s 1 ' p e r f o r m a n c e s ( S t a i n t o n , 1 9 8 3 ) a n d e x p e r i e n c e w i t h t h e u s e o f t o o l s ( E g o v i l l e , 1 9 7 9 ) , t h e r e h a s b e e n l i m i t e d r e s e a r c h r e l a t e d t o c r i t e r i a f o r t o o l d e v e l o p m e n t . W r i t e r s h a v e b e e n m o r e p r e o c c u p i e d w i t h c r i t e r i a f o r m e a s u r i n g t h a n w i t h t h e a c t u a l a p p r a i s a l o f p e r f o r m a n c e . T h e s e c r i t e r i a " . . . . s h o u l d b e a b l e t o m e a s u r e t h e l e a r n i n g o f t h e c r i t i c a l c o n t e n t a s i d e n t i f i e d i n t h e c o n c e p t u a l f r a m e w o r k a n d c o u r s e o b j e c t i v e s " ( B r o z e n e c a n d o t h e r s 1 9 8 7 , 4 3 ) . S t r o n g w a s m o r e s p e c i f i c . S h e i d e n t i f i e d " c l i n i c a l c r i t e r i a w h i c h p e r m i t t h e e d u c a t o r t o e v a l u a t e s t u d e n t p e r f o r m a n c e c o m p r e h e n s i v e l y a n d c o n s i s t e n t l y " a s t h e p r i m a r y f o c u s w h e n a p p r a i s i n g p e r f o r m a n c e ( 1 9 7 9 , 1 ) . M o r e o v e r B r o z e n e c , M a r s h a l l , T h o m a s , a n d W a l s h ( 1 9 8 7 ) s p e c i f i e d t h a t t h e s e c l i n i c a l c r i t e r i a s h o u l d b e c e n t e r e d a r o u n d t h e t h r e e d o m a i n s o f l e a r n i n g : p s y c h o m o t o r , c o g n i t i v e , a n d a f f e c t i v e . H o w e v e r , w h e n a s s e s s i n g a f f e c t i v e 3 1 c r i t e r i a , " s p e c i f i c d e t e r m i n a n t s m u s t b e e s t a b l i s h e d t o j u s t i f y c l i n i c a l i n s t r u c t o r s ' i n t e r p r e t a t i o n s o f s t u d e n t s ' - a t t i t u d e s , v a l u e s , a n d i n t e r e s t s i n r e l a t i o n t o s a f e p a t i e n t c a r e " ( G o l e r n b i e c k i a n d E t h i n g t o n 1 9 7 9 , 4 4 ) . V a r i o u s m e a n s o f d a t a c o l l e c t i o n c a n b e e m p l o y e d , i n c l u d i n g : d i r e c t o b s e r v a t i o n o f t h e s t u d e n t , c l i n i c a l s i m u l a t i o n s , u s e o f v i d e o t a p i n g o f i n t e r a c t i o n s , s t u d e n t s e l f - e v a l u a t i o n s , a n d w r i t t e n a s s i g n m e n t s ( B r o z e n e c a n d o t h e r s , 1 9 8 7 ) . I n s h o r t , d o c u m e n t a t i o n o f d i r e c t o b s e r v a t i o n t h r o u g h a n e c d o t a l n o t e s " c o m p l e m e n t [ s ] . . . . [ e v a l u a t i o n ] . T h e i n t e n t o f t h e s e n o t a t i o n s i s t o c o n t r i b u t e t o t h e o v e r a l l s t u d e n t b e h a v i o r a l p i c t u r e i n t h e c l i n i c a l s e t t i n g " ( G o l e m b i e c k i a n d E t h i n g t o n 1 9 7 9 , 4 5 ) . T w o w r i t e r s l o o k e d b e y o n d t h e a c t u a l c l i n i c a l p e r f o r m a n c e o f s t u d e n t s . B e v i l a n d G r o s s e x p r e s s e d t h e n e e d t o i d e n t i f y t h e l e a r n i n g p o t e n t i a l o f c l i n i c a l a r e a s , c o n s i d e r i n g t h a t " . . . s t u d e n t s 1 - l e a r n i n g o b j e c t i v e s b e a c h i e v a b l e w i t h i n a c l i n i c a l s e t t i n g , t h a t n e c e s s a r y m a t e r i a l s a n d l e a r n i n g a c t i v i t i e s b e a v a i l a b l e a n d t h a t t h e a t m o s p h e r e o f t h e s e t t i n g b e c o n d u c i v e t o g r o w t h " ( 1 9 8 1 , 6 5 8 ) . W o o l l e y ( 1 9 7 7 ) n o t e d t h a t t h e i s s u e o f w h i c h s k i l l s n e e d e d t o b e a s s e s s e d 3 2 w a s a c o n s t a n t t h r e a d w h i c h h a s a p p e a r e d t h r o u g h o u t t h e h i s t o r y o f c l i n i c a l e v a l u a t i o n . O n t h e w h o l e , w r i t e r s p r e s e n t e d a n a w a r e n e s s o f t h e n u m e r o u s v a r i a b l e s w h i c h e n t e r i n t o t h e a s s e s s m e n t o f s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e a n d t h e n e e d t o u t i l i z e e v a l u a t i o n p r o c e s s e s w h i c h a r e o b j e c t i v e a n d r e l i a b l e . H o w e v e r , c l i n i c a l e v a l u a t i o n s h a v e b e e n p e r c e i v e d a s b i a s e d a n d u n f a i r b y s o m e s t u d e n t s . S t u d e n t g r i e v a n c e s a n d a p p e a l s o f e v a l u a t i v e d e c i s i o n s . T h e a b o v e p e r c e p t i o n s h a v e l e d s t u d e n t s t o f o r c e e d u c a t o r s t o r e v i e w s o m e e v a l u a t i v e d e c i s i o n s . W r i t e r s h a v e r e a c t e d t o t h i s t r e n d b y p r e s e n t i n g a r t i c l e s a b o u t t h e e v a l u a t i o n p r o c e s s a n d t h e a b i l i t y t o e n s u r e c o n g r u e n c e b e t w e e n s t u d e n t s ' c l i n i c a l p e r f o r m a n c e a n d a w a r d e d c l i n i c a l g r a d e s . A c c o r d i n g t o M a j o r o w i c z , " t h e p r o c e s s o f s u p p o r t i n g a c l i n i c a l g r a d e e f f e c t i v e l y s t a r t s b e f o r e s t u d e n t s b e g i n t h e c l i n i c a l c o u r s e a n d c o n t i n u e s t h r o u g h o u t t h e c o u r s e a n d f i n a l e v a l u a t i o n . . . . " ( 1 9 8 6 , 3 7 ) . S i n c e c l i n i c a l e v a l u a t i o n s c o n t a i n s u b j e c t i v e a p p r a i s a l s , i t f o l l o w s t h a t t h e s e e v a l u a t i o n s a r e c h a l l e n g e d m o r e c o m m o n l y t h a n t h e o r e t i c a l g r a d e s ( M i l l e r , 1 9 8 2 ) . W h e n s t u d e n t s a p p e a l s u c h e v a l u a t i o n s , f a c u l t y h a v e a g r e a t e r d e g r e e 3 3 o f d i f f i c u l t y i n s u p p o r t i n g t h e i r c o l l e a g u e s 1 ' a s s e s s m e n t s o f s t u d e n t s ( H u s t o n , 1 9 8 6 ) . D e s p i t e t h e v u l n e r a b i l i t y o f c l i n i c a l e v a l u a t o r s t o s u c h c h a r g e s " . . . t h e b u r d e n o f p r o o f i n a n a c a d e m i c g r a d e a p p e a l i s o n t h e s t u d e n t t o s h o w p r e j u d i c e o r c a p r i c i o u s n e s s o n t h e p a r t o f t h e f a c u l t y m e m b e r i n a r r i v i n g a t a g r a d e " ( M i l l e r 1 9 8 2 , 3 5 ) . M u r p h y a n d S a n d l i n g c a u t i o n e d r e a d e r s t h a t , a l t h o u g h t h e p r e s e n t p r e o c c u p a t i o n w i t h g r i e v a n c e s i n n u r s i n g p r o g r a m s i s r e l a t e d t o " g r a d e s o r a d m i s s i o n o r r e t e n t i o n i n a p r o g r a m , s t u d e n t s a r e b e g i n n i n g t o a d d r e s s t h e q u a l i t y o f e d u c a t i o n a l p r o g r a m s a n d e x p e c t e d c o m p e t e n c i e s d e r i v e d f r o m t h e s e p r o g r a m s " ( 1 9 7 8 , 4 3 ) . A s a r e s u l t o f t h i s q u e s t i o n i n g o f a w a r d e d g r a d e s , w r i t e r s h a v e p r e s e n t e d a n u m b e r o f r e p o r t s o n b o t h t h e s t r u c t u r e a n d t h e p r o c e s s o f g r i e v a n c e a n d a p p e a l h e a r i n g s . M i l l e r e x p l a i n s t h a t " [ w ] h e n a n a p p a r e n t l y i r r e c o n c i l a b l e d i f f e r e n c e e x i s t s b e t w e e n a s t u d e n t a n d a f a c u l t y m e m b e r a b o u t t h e f a i r n e s s o f a g r a d e , a n a p p e a l p r o c e s s i s n e e d e d t o r e s o l v e t h e p r o b l e m a n d p r o t e c t t h e r i g h t s o f b o t h " ( 1 9 8 1 , 1 8 6 ) . 3 4 M a j o r o w i c z i n d i c a t e d t h a t t h e r i g h t s o f b o t h p a r t i e s i m p l i e s t h a t s t u d e n t s 1 ' r i g h t s a r e p r o t e c t e d b y a f f o r d i n g t h e m " d u e p r o c e s s i n a c a d e m i c m a t t e r s " a n d f a c u l t y a r e p r o t e c t e d b y a f f o r d i n g t h e m t h e i r " r i g h t t o f r e e d o m o f i n s t r u c t i o n " ( 1 9 8 6 , 3 8 ) . L o g s d o n , L a c e f i e l d , a n d C l a r k s u m m a r i z e d t h a t h e a r i n g s p r o v i d e d : ( a ) t h e s t u d e n t w i t h a r e c o u r s e , ( b ) t h e s t u d e n t t h e r i g h t t o d u e p r o c e s s w i t h o u t a f f e c t i n g t h e i n s t i t u t i o n ' s r i g h t t o a d m i n i s t e r a n o r g a n i z e d p r o g r a m o f i n s t r u c t i o n , a n d ( c ) p r o t e c t i o n s o f f a c u l t y r i g h t s t o f r e e d o m o f i n s t r u c t i o n ( 1 9 7 9 , 1 8 5 ) . T h e y f u r t h e r s t a t e d t h a t : i f t h e s t u d e n t p u r s u e s t h e g r i e v a n c e o u t s i d e t h e i n s t i t u t i o n i n t h e c i v i l c o u r t s y s t e m , [ t h e h e a r i n g ] p r o v i d e s d a t a f o r t h e c o u r t t o r e v i e w a n d m a k e a " d u e p r o c e s s r u l i n g " w i t h o u t h a v i n g t o e v a l u a t e a c a d e m i c e v i d e n c e ; . . . [ t h e c o u r t ] c a n m e d i a t e p o t e n t i a l f a c u l t y a b u s e o f p o w e r i n a c a d e m i c e v a l u a t i o n b y l o o k i n g a t t h e p r o c e s s o f i n s t r u c t i o n . . . [ v e r s u s ] t h e o u t c o m e o f i n s t r u c t i o n . ( L o g s d o n a n d o t h e r s 1 9 7 9 , 1 8 5 ) H u s t o n r e p o r t e d t h a t t h e s t r u c t u r e o f g r i e v a n c e 3 5 a n d a p p e a l p r o c e d u r e s v a r i e s b u t m o s t c o n t a i n : s p e c i f i e d t i m e l i m i t s , i d e n t i f i c a t i o n o f t h e r e a s o n f o r t h e g r i e v a n c e , s p e c i f i e d p r o c e s s f o r s e l e c t i o n o f t h e h e a r i n g p a n e l , d e s c r i p t i o n o f t h e s t e p s i n t h e p r o c e s s , a n d t h e p r o c e s s f o r c o m m u n i c a t i n g t h e h e a r i n g o u t c o m e ( 1 9 8 6 , 3 0 4 ) . P r o c e d u r e s g e n e r a l l y h a v e t w o d i s t i n c t p h a s e s : i n f o r m a l a n d f o r m a l ( M u r p h y a n d S a n d l i n g , 1 9 7 8 ) . T h e " i n f o r m a l p r o c e s s i s t o f a c i l i t a t e c o m m u n i c a t i o n " a n d o c c u r s i n i t i a l l y b e t w e e n t h e s t u d e n t a n d t h e i n s t r u c t o r a n d e n d s w i t h a c o n f e r e n c e w i t h t h e d e a n . T h e f o r m a l p r o c e s s w a s d i v i d e d i n t o t w o r e v i e w s , t h e f i r s t b e i n g a " m e d i a t i o n m e e t i n g " w h e r e t h e p a r t i e s p r e s e n t e d t h e i r i s s u e s t o a " n o n - p a r t i s a n g r o u p o f p e e r s . " I f t h e i s s u e s w e r e n o t r e s o l v e d d u r i n g t h i s p r o c e s s t h e n a " d a t a c o l l e c t i o n m e e t i n g " w a s h e l d w h e r e t h e h e a r i n g p a n e l d e t e r m i n e d t h e o u t c o m e o n t h e b a s i s o f t h e e v i d e n c e p r e s e n t e d ( 1 9 7 8 , 4 1 - 2 ) . L o g s d o n , L a c e f i e l d , a n d C l a r k a l s o w r o t e a b o u t a s i m i l a r p r o c e s s . D u r i n g t h e i n f o r m a l p h a s e , t h e s t u d e n t w a s r e q u i r e d t o m e e t w i t h f o u r d i f f e r e n t l e v e l s o f t h e n u r s i n g d e p a r t m e n t : c l i n i c a l i n s t r u c t o r , c o o r d i n a t o r o f c o u r s e , a s s i s t a n t d i r e c t o r o f p r o g r a m , a n d d i r e c t o r o f t h e p r o g r a m . A l l o f t h e s e l e v e l s o f 3 6 m e e t i n g s h a d t o b e c o m p l e t e d b e f o r e t h e s t u d e n t c o u l d r e q u e s t a f o r m a l r e v i e w w h i c h w a s i n i t i a t e d t h r o u g h a w r i t t e n r e q u e s t f r o m t h e s t u d e n t . T h i s h e a r i n g o c c u r r e d b e f o r e a p a n e l w h i c h c o n s i d e r e d t h e e v i d e n c e a n d m a d e a d e c i s i o n b a s e d o n w h e t h e r e v i d e n c e i n d i c a t e d t h a t : ( a ) t h e s t u d e n t L s r i g h t s w e r e v i o l a t e d d u r i n g t h e i n s t r u c t i o n a l p r o c e s s , ( b ) t h e p o l i c i e s a n d p r o c e d u r e s o f t h e i n s t i t u t i o n w e r e u p h e l d b y f a c u l t y d u r i n g t h e i n s t r u c t i o n a l p r o c e s s , ( c ) t h e s t u d e n t w a s t r e a t e d e q u i t a b l y ( 1 9 7 9 , 1 8 9 ) . R o b i n s o n a n d B r i d g e w a t e r d i s c u s s e d a p r o c e d u r e w h e r e b y s t u d e n t s m e t w i t h t h e i r c l i n i c a l i n s t r u c t o r s a n d a t t e m p t e d t o r e s o l v e d i s c r e p a n c i e s i n t h e i r p e r c e p t i o n s . I f t h i s f a i l e d , t h e n s t u d e n t s h a d t h e r i g h t t o r e q u e s t a f o r m a l h e a r i n g ( 1 9 7 9 , 1 9 2 ) . I n a n o t h e r i n s t i t u t i o n , t h e i n i t i a l h e a r i n g p a n e l w a s d r a w n f r o m b o t h t h e n u r s i n g f a c u l t y . a n d t h e s t u d e n t b o d y . F o l l o w i n g t h e h e a r i n g , t h i s p a n e l m a d e a d e c i s i o n a n d f o r w a r d e d i t t o t h e d e a n . F u r t h e r d i s a g r e e m e n t w i t h t h e d e c i s i o n w a s t h e n a p p e a l e d d i r e c t l y t o t h e d e a n . T h e d e a n r e v i e w e d t h e t r a n s c r i p t o r s u m m a r y f r o m t h e h e a r i n g f o r e i t h e r t h e a b s e n c e o f 3 7 o r a d h e r e n c e t o p r o p e r p r o c e d u r e s o r t h e v i o l a t i o n o f s t u d e n t ' s r i g h t s t o d u e p r o c e s s ( M i l l e r 1 9 8 2 , 3 7 ) . M a j o r o w i c z d e s c r i b e s a f o r m a l g r i e v a n c e p r o c e d u r e w h e r e t h e p r o c e s s w a s i n i t i a t e d w h e n a s t u d e n t s u b m i t t e d a w r i t t e n r e q u e s t w h i c h o u t l i n e d t h e " d i s p u t e d g r a d e , " " r e a s o n w h y s t u d e n t [ f o u n d t h e ] g r a d e u n f a i r , " a n d a " p r o p o s e d r e m e d y " ( 1 9 8 6 , 3 8 ) . T h e s e r e q u e s t s w e r e r e c e i v e d b y a c o m m i t t e e w h o r e v i e w e d t h e a l l e g a t i o n s a n d a l l e v i d e n c e s u p p l i e d b y b o t h p a r t i e s . A h e a r i n g w a s t h e n c o n d u c t e d a n d i t s o u t c o m e w a s c o m m u n i c a t e d t o t h e p a r t i e s , i n d i c a t i n g e i t h e r " i n s u f f i c i e n t e v i d e n c e t o s u p p o r t t h e s t u d e n t L s c h a r g e s " o r " c h a r g e s h a v e s u b s t a n c e . " I f t h e l a t t e r w e r e t h e c a s e , t h e y s t a t e d t h e i r r e c o m m e n d a t i o n f o r " a p p r o p r i a t e c o r r e c t i v e a c t i o n " ( 1 9 8 6 , 4 0 ) . N o m a t t e r w h i c h p r o c e d u r e s w e r e u s e d t o r e v i e w e v a l u a t i v e d e c i s i o n s , w h e n s t u d e n t s q u e s t i o n e d t h e s e d e c i s i o n s , t h e o v e r - r i d i n g i s s u e w h i c h d e t e r m i n e d t h e s u c c e s s o f t h e a p p e a l w a s w h e t h e r t h e s t u d e n t ' s a s s e s s m e n t h a d b e e n m a d e i n a c c o r d a n c e w i t h d u e p r o c e s s . 3 8 L e g a l i m p l i c a t i o n s o f s t u d e n t e v a l u a t i o n s . D u e p r o c e s s , a c c o r d i n g t o I r b y , F a n t e l , M i l a m , a n d S c h w a r z , r e q u i r e s t h a t t h e p r o g r a m " i n f o r m t h e s t u d e n t , o r a l l y o r i n w r i t i n g ( o r b o t h ) , o f i n a d e q u a c i e s i n p e r f o r m a n c e a n d t h e i r e f f e c t s o n a c a d e m i c s t a n d i n g " ( 1 9 8 1 , 1 8 1 - 2 ) . H o w e v e r P o l l o k , P o t e e t , a n d W h e l a n b e l i e v e t h a t d u e p r o c e s s a p p l i e s t o a l l s t u d e n t s a n d m e a n s t h a t t h e y m u s t " b e i n f o r m e d o f t h e g r a d i n g s t a n d a r d s , a n d t h e s a m e g r a d i n g p r o c e d u r e m u s t b e a p p l i e d e q u a l l y t o a l l " ( 1 9 7 7 , 6 3 8 ) . I n o r d e r t o m e e t t h e a b o v e c r i t e r i a a n d e n s u r e t h a t " j u s t i c e b e r e n d e r e d i n a l l d e c i s i o n s . . . . p o l i c i e s a n d p r o c e d u r e s [ n e e d t o b e d e v e l o p e d ] t h a t a r e b o t h f a i r a n d r e a s o n a b l e " ( N a s h , M o o r e , a n d A n d e s 1 9 8 1 , 1 5 0 ) . : T o w a r d t h e e n d o f t h e 7 0 ' s , w r i t e r s s u c h a s O z i m e k a n d Y u r a b e g a n t o s h o w a m o r e i n t e g r a t i v e v i e w a b o u t t h e s e r i g h t s . T h e y r e p o r t e d t h a t " t h e r i g h t s a n d r e s p o n s i b i l i t i e s o f s t u d e n t s a n d f a c u l t y d i f f e r . T h i s d i f f e r e n c e n e e d s t o b e s u p p o r t e d r a t h e r t h a n o b l i t e r a t e d i n o r d e r t o a s s u r e t h a t t h e g o a l s o f t h e e d u c a t i o n a l p r o g r a m a r e a c h i e v e d " ( 1 9 7 7 , 2 ) . O n e o f t h e s e f a c u l t y r i g h t s i s t o e v a l u a t e s t u d e n t s . T h i s r i g h t h a s b e e n c o n s i s t e n t l y u p h e l d b y t h e c o u r t s 3 9 ( P o l l o k a n d P o t e e t 1 9 8 3 , 3 1 ) . H o w e v e r , t h e i n s t i t u t i o n a l s o h a s t h e r e s p o n s i b i l i t y t o p r o v i d e i t s s t u d e n t s w i t h " . . . . a s t a t e m e n t r e g a r d i n g s c h o o l e x p e c t a t i o n s f o r p e r s o n a l a n d p r o f e s s i o n a l q u a l i t i e s i f t h e s c h o o l i s t o c o n s i d e r p o o r p e r f o r m a n c e i n t h e s e a r e a s a s a b a s i s f o r d i s m i s s a l " ( I r b y a n d o t h e r s 1 9 8 1 , 1 8 1 ) . N o t o n l y a r e i n s t i t u t i o n s r e q u i r e d t o p r o v i d e s u c h e x p e c t a t i o n s b u t s c h o o l o f f i c i a l s a r e a l s o r e q u i r e d t o e n s u r e t h a t d i s m i s s a l d e c i s i o n s a r e b a s e d " o n e x p e r t e v a l u a t i o n o f c u m u l a t i v e i n f o r m a t i o n " ( N i e d r i n g h a u s a n d 0 L D r i s c o l l 1 9 8 3 , 1 5 7 ) . E x p e r t e v a l u a t i o n i m p l i e s t h a t t h e e v a l u a t i o n p r o c e s s b e a p p l i e d f a i r l y , m e a n i n g t h a t " . . . . f a c u l t y i n f o r m s t u d e n t s o f p e n d i n g f a i l u r e a n d d i s m i s s a l a n d ; t e l l t h e m t h e r e a s o n s f o r s u c h d e c i s i o n s " ( P o t e e t a n d P o l l o c k 1 9 8 1 , 1 8 9 0 ) . T h u s , w h e n s t u d e n t s 1 ' p e r f o r m a n c e s a r e s u c h t h a t a c a d e m i c d i s m i s s a l i s b e i n g c o n s i d e r e d , t h e r e a r e b a s i c r e q u i r e m e n t s w h i c h h a v e t o b e a d h e r e d t o b e f o r e t h e d i s m i s s a l d e c i s i o n i s f i n a l i z e d . T h e s e r e q u i r e m e n t s i n c l u d e , . . . . t h e s t u d e n t b e a d v i s e d o f a c a d e m i c d e f i c i e n c i e s i n c o m p a r i s o n t o t h e e s t a b l i s h e d s t a n d a r d a n d b e n o t i f i e d t h a t h e o r s h e i s b e i n g 4 0 p l a c e d o n p r o b a t i o n f o r a s p e c i f i e d p e r i o d o f t i m e , a t t h e e n d o f t h e p r o b a t i o n a r y p e r i o d [ i f ] t h e g r a d e d e f i c i e n c y h a s n o t b e e n r e s o l v e d t h e s t u d e n t m a y b e g i v e n a n o t i c e o f d i s m i s s a l . ( N a s h , M o o r e , a n d A n d e s 1 9 8 1 , 1 5 0 ) I n t h e e v e n t t h a t s t u d e n t s d i s a g r e e w i t h d e c i s i o n s , t h e y " m u s t s h o w t h a t t h e f a c u l t y f a i l e d t o t a k e t h e f a c t s o f t h e s i t u a t i o n i n t o a c c o u n t , d i d n o t a r r i v e a t a d e c i s o n i n a l o g i c a l a n d r e a s o n a b l e m a n n e r o r a c t e d f o r m a l i c i o u s r e a s o n s " f o r d e c i s i o n s t o b e o v e r t u r n e d o r m o d i f i e d ( I r b y a n d o t h e r s 1 9 8 1 , 1 8 2 ) . U n q u e s t i o n a b l y , f a c u l t i e s 1 ' b e s t d e f e n c e a g a i n s t s t u d e n t c h a l l e n g e s t o t h e i r d e c i s i o n s i s " f a i r , w e l l - c o n c e i v e d p u r p o s e f u l e v a l u a t i v e s y s t e m a n d p r o c e s s " ( P o l l o k a n d P o t e e t 1 9 8 3 , 3 2 ) . I n n u r s i n g p r o g r a m s , s t u d e n t s a r e r e q u i r e d t o c a r r y o u t t h e i r c l i n i c a l p r a c t i c e i n a g e n c i e s w h i c h a r e n o t u n d e r t h e e d u c a t i o n a l i n s t i t u t i o n ' s a d m i n i s t r a t i v e c o n t r o l . T h e s e h e a l t h c a r e a g e n c i e s o f t e n s u p e r i m p o s e f u r t h e r a d d i t i o n s t o e d u c a t i o n a l s t a n d a r d s . I n e s s e n c e : 4 1 T h e h e a l t h c a r e i n s t i t u t i o n r e t a i n s t h e r i g h t t o r e q u i r e a s t u d e n t o r a f a c u l t y m e m b e r t o l e a v e t h e p r o g r a m b e c a u s e h i s o r h e r h e a l t h s t a t u s o r p e r f o r m a n c e i s d e e m e d p r e j u d i c i a l t o t h e h e a l t h c a r e f a c i l i t y . ( K e l l y 1 9 8 1 , 9 6 ) A g r e e m e n t s a l l o w i n g e d u c a t i o n a l i n s t i t u t i o n s ' " s t u d e n t s t o c a r r y o u t c l i n i c a l p r a c t i c e i n h e a l t h c a r e a g e n c i e s a r e g e n e r a l l y f o r m u l a t e d i n t o c o n t r a c t s . S i n c e s t u d e n t s a r e p r o v i d i n g a c t u a l c a r e t o p a t i e n t s i n s u c h a g e n c i e s , s t u d e n t s a r e h e l d t o t h e s a m e s t a n d a r d a s t h a t o f t h e " a v e r a g e , r e a s o n a b l y c o m p e t e n t p r o f e s s i o n a l n u r s e " ( C r e i g h t o n 1 9 7 5 , 2 2 3 ) . T h u s , t h e s t a n d a r d s w h i c h e d u c a t o r s u s e t o e v a l u a t e s t u d e n t s a r e a c o m b i n a t i o n o f e d u c a t i o n a l i n s t i t u t i o n e x p e c t a t i o n s , p r o f e s s i o n a l p r a c t i c e s t a n d a r d s , a n d h e a l t h - c a r e - a g e n c y , p a t i e n t - c a r e s t a n d a r d s . S t u d e n t s w h o a r e d i s s a t i s f i e d w i t h c l i n i c a l e v a l u a t i v e d e c i s i o n s , b a s e d o n s u c h s t a n d a r d s , h a v e c h a l l e n g e d e d u c a t o r s ' " d e c i s i o n s n o t o n l y w i t h i n t h e i n s t i t u t i o n b u t a l s o t h r o u g h t h e j u d i c i a l s y s t e m . P r o f e s s i o n a l e d u c a t i o n a l p r o g r a m s t u d e n t s r e p r e s e n t t h e m a j o r i t y o f p e t i t i o n e r s o r p l a i n t i f f s i n s u c h l e g a l 4 2 c a s e s ( M a t t i n g l y a n d G e h r i n g 1 9 8 0 , 4 8 0 ) . T h e s u c c e s s o f s t u d e n t s u s i n g s u c h a c t i o n i s r a r e b e c a u s e : C o u r t s a r e g e n e r a l l y h e s i t a n t t o e n t e r i n t o t h e e d u c a t i o n a l p r o c e s s a n d i n t e r v e n e u s u a l l y o n l y a f t e r a d m i n i s t r a t i v e c h a n n e l s f o r s e t t l i n g g r i e v a n c e s h a v e b e e n e x h a u s t e d a n d a v i o l a t i o n o f g u a r a n t e e d r i g h t s s e e m s c l e a r . ( P o l l o k , P o t e e t , a n d W h e l a n 1 9 7 7 , 6 3 6 ) C o u r t s g e n e r a l l y a p p l y " t h e r u l e o f j u d i c i a l n o n - i n t e r f e r e n c e i n s c h o l a s t i c a f f a i r s a s m u c h a s p o s s i b l e . T h e i r r a t i o n a l e i s t h a t t h e y l a c k e x p e r t i s e t o r e v i e w a c a d e m i c d e c i s i o n s " ( N a s h , M o o r e , a n d A n d e s 1 9 8 1 , 1 5 0 ) . K a p p ( 1 9 8 1 ) a l s o s u p p o r t e d t h i s p o s i t i o n r e g a r d i n g t h e c o u r t s . T h u s , t h e l i k e l i h o o d o f t h e c o u r t s c h a n g i n g c l i n i c a l e v a l u a t i o n d e c i s i o n s r e g a r d i n g s t u d e n t s i s r e m o t e u n l e s s t h a t d e c i s i o n w a s a r r i v e d a t u n f a i r l y o r i n a b i a s e d m a n n e r . H i g h e r E d u c a t i o n L i t e r a t u r e H i g h e r e d u c a t i o n i n s t i t u t i o n s i n C a n a d a a r e g e n e r a l l y p r o v i n c i a l l y l e g i s l a t e d t h r o u g h A c t s a n d f u n d e d t h r o u g h t a x e s . S o m e o f t h e s e A c t s d i r e c t e d u c a t i o n a l i n s t i t u t i o n s ' t o p r o v i d e a p p e a l p r o c e d u r e s 43 w h e n s t u d e n t s q u e s t i o n d e c i s i o n s m a d e b y o f f i c i a l s w i t h i n t h e s e a g e n c i e s . T h u s , t h e n e e d f o r p o l i c i e s a n d p r o c e d u r e s r e l a t e d t o a p p e a l s b y s t u d e n t s m a y a l s o b e m a n d a t e d n o t o n l y f r o m w i t h o u t t h e i n s t i t u t i o n s . K r i v y i n h i s s t u d y o f s t u d e n t l e g a l r i g h t s i n C a n a d i a n u n i v e r s i t i e s , n o t e d ; . . . . m o s t o f t h e s e a c t s p r o v i d e a s t a t u t o r y d u t y f o r t h e u n i v e r s i t y t o h e a r a n y s t u d e n t g r i e v a n c e s o n a n y m a t t e r . F a i l u r e t o p r o v i d e m e c h a n i s m s f o r t h e h e a r i n g o f s u c h a p p e a l s i n a p r o p e r m a n n e r , w i l l b e d e a l t w i t h s w i f t l y b y t h e c o u r t s . ( K r i v y 1 9 8 2 , 1 5 0 ) A l t h o u g h " , - , t h e r e i s a n o u t s i d e l e g i s l a t e d c o n t r o l o n t h e t r e a t m e n t o f s t u d e n t s b y h i g h e r e d u c a t i o n i n s t i t u t i o n s ; a s e c o n d a r y l e g a l c o n t r o l i s e x e r c i s e d t h r o u g h c o n t r a c t l a w . T h i s c o n t r a c t i s o p e r a t i o n a l w h e n : . . . . t h e s t u d e n t c o m p l e t e s r e g i s t r a t i o n a n d p a y m e n t f o r s e r v i c e s . . . . T h e s t u d e n t a g r e e s t o p a y t u i t i o n a n d f e e s a n d a b i d e b y r e g u l a t i o n s a n d c o n d i t i o n s s e t f o r t h i n v a r i o u s d o c u m e n t s p r o v i d e d b y t h e 4 4 i n s t i t u t i o n . . . . C o l l e g e a g r e e s t o p r o v i d e i n s t r u c t i o n f o r d e s i r e d d e g r e e a n d i s b o u n d b y s a m e c o n d i t i o n s s e t f o r t h i n d o c u m e n t s . ( B e a m a n d H i n e s 1 9 8 1 , 3 7 ) T h i s i s a m a r k e d c h a n g e f r o m t h e l e g a l c o n t r o l s w h i c h o c c u r w i t h i n t h e e l e m e n t a r y a n d s e c o n d a r y s e c t o r s o f e d u c a t i o n . I n t h e s e i n s t i t u t i o n s , t h e d o c t r i n e o f " i n l o c o p a r e n t i s " p r e v a i l s , w h i c h i m p l i e s t h a t t h e e d u c a t i o n a l i n s t i t u t i o n a c t s i n t h e p l a c e o f t h e p a r e n t . W h i l e c o n t r a c t l a w a p p l i e s t o h i g h e r e d u c a t i o n i n s t i t u t i o n s , " t h e m o s t w e l 1 - a c c e p t e d t h e o r y i s t h a t t h e r i g h t s a n d r e s p o n s i b i l i t i e s o f b o t h s t u d e n t s a n d u n i v e r s i t i e s a r i s e f r o m a n e x p r e s s e d o r i m p l i e d c o n t r a c t " ( K r i v y 1 9 8 2 , 4 1 ) . I n t h i s c o n t e x t , " [ t h e ] i m p l i e d c o n t r a c t . . . . [ m e a n s ] . . . . t h a t t h e s t u d e n t w i l l n o t b e a r b i t r a r i l y e x p e l l e d , . . . . [ a n d ] . . . . t h a t t h e s t u d e n t w i l l s u b m i t h i m s e l f t o r e a s o n a b l e r u l e s a n d r e g u l a t i o n s f o r t h e b r e a c h o f w h i c h , i n a p r o p e r c a s e , h e m a y b e e x p e l l e d " ( L e r b l a n c e 1 9 7 9 , 6 0 8 ) . " R e a s o n a b l e r u l e s a n d r e g u l a t i o n s " i m p l y t h a t : s t u d e n t s c a n e x p e c t t o r e c e i v e s p e c i f i c c o u r s e r e q u i r e m e n t s a n d e v a l u a t i o n p r o c e d u r e s a t t h e b e g i n n i n g o f e a c h c l a s s . T h e y c a n e x p e c t w r i t t e n 4 5 o b j e c t i v e s t o b e f u l f i l l e d b y t h e i n s t r u c t o r . A n d t h e y w i l l p r e s u m a b l y h a v e g r o w i n g a c c e s s t o d u e p r o c e s s p r o c e d u r e s w i t h i n t h e i r i n s t i t u t i o n w h e n t h e y b e l i e v e t h a t e d u c a t i o n a l c o n t r a c t s h a v e n o t b e e n m e t . ( B a r n e s 1 9 7 8 , 1 0 ) I n o r d e r t o e n s u r e t h a t d u e p r o c e s s i s p r o v i d e d f o r s t u d e n t s , h i g h e r e d u c a t i o n i n s t i t u t i o n s m u s t e n s u r e t h a t g u i d e l i n e s f o r s u c h p r o c e s s e s a r e f o r m u l a t e d a n d f o l l o w e d . S u c h p r o c e s s g u i d e l i n e s s e r v e t w o p u r p o s e s i n t h e i r p r o t e c t i o n o f b o t h i n s t i t u t i o n s a n d s t u d e n t s ( A l e x a n d e r 1 9 7 8 , 3 5 5 ) . P r o t e c t i o n o f i n s t i t u t i o n s d o e s n o t n e g a t e t h e i r o f f i c i a l r e s p o n s i b i l i t y t o p r o v i d e p r o g r a m s w h i c h a r e t a u g h t b y c o m p e t e n t i n d i v i d u a l s w h o a r e c a p a b l e o f m a k i n g j u d g m e n t s a b o u t s t u d e n t s ' ' p e r f o r m a n c e . I n o r d e r t o m a k e s u c h j u d g m e n t s , e d u c a t o r s n ' e . e d t o m e e t t h r e e o b l i g a t i o n s : " [ p r o v i s i o n o f ] a d e q u a t e s u p e r v i s i o n , p r o p e r i n s t r u c t i o n , a n d m a i n t e n a n c e o f e q u i p m e n t " ( C o n n o r s 1 9 8 1 , 1 0 ) . P r o p e r i n s t r u c t i o n i m p l i e s : . . . . t h e a s s i g n m e n t o f c o m p e t e n t p e r s o n s t o e a c h c o u r s e i n a c c o r d w i t h i n s t r u c t i o n a l p o l i c i e s a n d i n u s i n g a p p r o p r i a t e t e a c h i n g m e t h o d s f o r t h e 46 p a r t i c u l a r c o u r s e c o n t e n t a n d t y p e o f s t u d e n t . ( O w e n s 1 9 8 0 , 1 4 ) A d e q u a t e s u p e r v i s i o n r e q u i r e s : . . . . q u a l i f i e d s u p e r v i s o r y a t t e n t i o n [ e s p e c i a l l y i n h i g h r i s k a c t i v i t i e s ] . . . , a n d i t s h o u l d b e a s s u r e d t h a t t h e n u m b e r o f s t u d e n t s i n t h o s e h i g h r i s k a c t i v i t i e s o r a r e a s d o e s n o t e x c e e d t h e a b i l i t y o f s t a f f t o p r o v i d e f o r a d e q u a t e s u p e r v i s i o n . ( O w e n s 1 9 8 0 , 1 5 ) . T h i s r i s k r e f l e c t s t h e f a c t t h a t s t u d e n t s p r o v i d e c a r e t o a c t u a l p a t i e n t s i n c l i n i c a l s e t t i n g s . T h e d e t e r m i n a t i o n o f w h a t c o n s t i t u t e s a d e q u a t e s u p e r v i s i o n o f t h e s e s t u d e n t s r e s i d e s w i t h n u r s i n g p r o g r a m f a c u l t y . T h e y r e t a i n t h i s r i g h t b e c a u s e : T h e f a c u l t y [ a r e ] u n i q u e l y q u a l i f i e d t o o b s e r v e a n d j u d g e a l l a s p e c t s o f s t u d e n t a c a d e m i c p e r f o r m a n c e i n c l u d i n g d e m o n s t r a t e d k n o w l e d g e , t e c h n i c a l a n d i n t e r p e r s o n a l s k i l l s , a t t i t u d e s a n d p r o f e s s i o n a l c h a r a c t e r . ( I r b y a n d o t h e r s 1 9 8 1 , 1 0 5 ) T h u s , t h e s e s t a n d a r d s a r e n o t r e s t r i c t e d o n l y t o t h e a s s e s s m e n t o f t h e o r e t i c a l k n o w l e d g e b u t a l s o t o o t h e r a p p r a i s a l s o f s t u d e n t s ' a b i l i t i e s ( J e n n i n g s , 1 9 8 0 - 8 1 ) . 4 7 T h e s e a d d i t i o n a l s t a n d a r d s " a r e e s p e c i a l l y p r e v a l e n t a t p r o f e s s i o n a l s c h o o l s w h e r e c l i n i c a l a b i l i t y i s s e e n a s a n e s s e n t i a l p r e r e q u i s i t e t o s u c c e s s f u l c o m p l e t i o n o f t h e p r o g r a m " ( J e n n i n g s 1 9 8 0 - 8 1 , 2 1 0 ) . T h e m a j o r d i f f i c u l t y i n a s s e s s i n g c l i n i c a l p e r f o r m a n c e r e l a t e s t o t h e d e g r e e o f " d i s c r e t i o n " a n d " p e r s o n a l j u d g m e n t " u s e d b y e v a l u a t o r s ( L a M o r t e a n d M e a d o w s 1 9 7 9 , 2 0 1 ) . T h i s s u b j e c t i v i t y i n c r e a s e s a s i n s t r u c t i o n " b e c o m e s i n c r e a s i n g l y i n d i v i d u a l i z e d a n d ^ s t u d e n t s ' 1 ' c o m p e t e n c i e s , i n s p e c i a l i z e d a r e a s , a r e e v a l u a t e d b y p r o f e s s o r s c o n s i d e r e d t o b e e x p e r t s i n t h e i r p a r t i c u l a r d i s c i p l i n e " ( L a M o r t e a n d M e a d o w s 1 9 7 9 , 2 0 9 ) . T h u s , s t u d e n t s a r e a t t h e g r e a t e s t r i s k i n t e r m s o f r e c e i v i n g u n f a i r o r b i a s e d e v a l u a t i o n s i n : . . . . g r a d u a t e a n d p r o f e s s i o n a l s c h o o l s , c l i n i c a l p r o g r a m s a n d o t h e r c o u r s e s w h e r e e v a l u a t i o n p r o c e d u r e s l a c k a n o n y m i t y , w h e r e t h e y i n v o l v e t h e s o - c a l l e d g r a y a r e a s b e t w e e n a c a d e m i c p e r f o r m a n c e a n d b e h a v i o r , a n d w h e r e a c a d e m i c r e q u i r e m e n t s a r e v a g u e o r a m b i g u o u s . ( V e r n o n 1 9 7 9 , 5 3 ) . " E d u c a t o r s . . . . a r e b e i n g h e l d i n c r e a s i n g l y r e s p o n s i b l e f o r o r a l a n d w r i t t e n a s s u r a n c e s g i v e n t o s t u d e n t s " ( P a v e l a 1 9 7 8 , 7 4 ) . I n s t i t u t i o n s s h o u l d h a v e w r i t t e n a c a d e m i c p o l i c i e s w h i c h a r e c a r e f u l l y f o l l o w e d t o r e d u c e a n y m i s u n d e r s t a n d i n g s s t u d e n t s m a y h a v e r e g a r d i n g t h e i r e v a l u a t i o n p r o c e s s ( P a v e l a 1 9 7 8 , 7 4 ) . I n a d d i t i o n , t h e u s e o f " s t a t u t e s , r e g u l a t i o n s , a n d e x p e r t t e s t i m o n y t o e s t a b l i s h a m i n i m a l e d u c a t i o n a l s t a n d a r d " m a y a l s o e n s u r e a n e s t a b l i s h e d q u a l i t y o f e d u c a t i o n ( J o r g e n s o n 1 9 7 9 , 3 5 7 ) . A d h e r e n c e t o e s t a b l i s h e d p o l i c i e s , p r o c e d u r e s , a n d s t a n d a r d s a s s i s t s i n p r o t e c t i n g e d u c a t o r s a n d t h e i r i n s t i t u t i o n s f r o m j u d i c i a l i n t e r f e r e n c e i n t h e i r a c a d e m i c d e c i s i o n - m a k i n g . T h e a b o v e i s n e c e s s a r y b e c a u s e : . . . . c l i n i c a l p e r f o r m a n c e i n e v i t a b l y r e q u i r e s f a c u l t y e v a l u a t i o n o f s o m e t h i n g m o r e t h a n s t r a i g h t - f o r w a r d a c a d e m i c w o r k a n d c o u r t s m a y w e l l [ d e t e r m i n e t h a t ] t h e f a i r n e s s o f p r o c e d u r a l m e t h o d l i e s s q u a r e l y w i t h i n j u d i c i a l e x p e r t i s e r e g a r d l e s s o f t h e s u b j e c t m a t t e r i n v o k e d . ( R a y 1 9 8 1 , 1 8 3 ) T h u s i n p r o f e s s i o n a l p r o g r a m s w i t h a c l i n i c a l e x p e r i e n c e c o m p o n e n t , f a c u l t y m e m b e r s 1 ' r i g h t s m a y w e l l 4 9 h a v e a h i g h e r l i k e l i h o o d o f b e i n g p r o t e c t e d t h a n t h o s e o f s t u d e n t s . T h i s l i m i t e d s t u d e n t p r o t e c t i o n i s a d i r e c t r e s u l t o f t h e d i f f i c u l t y e d u c a t o r s e n c o u n t e r w h e n s e t t i n g s t a n d a r d s t o j u d g e t h e q u a l i t y o f e d u c a t i o n p r o v i d e d . A n o u t c o m e o f t h e a b o v e i s : I n c r e a s e d c r i t i c i s m a n d c o n c e r n o v e r s t u d e n t e v a l u a t i o n p r o c e d u r e s m a k e n e c e s s a r y a c a r e f u l e x a m i n a t i o n t o e n s u r e t h a t t h e p o l i c i e s a n d p r a c t i c e s u s e d i n s t u d e n t e v a l u a t i o n a r e e d u c a t i o n a l l y s o u n d a n d t h e r e b y g i v e s t u d e n t s f a i r t r e a t m e n t . ( L a M o r t e a n d M e a d o w s 1 9 7 9 , 2 0 9 ) L a M o r t e a n d M e a d o w s c o n c l u d e t h a t e v a l u a t i n g a c a d e m i c p e r f o r m a n c e i s " d i s c r e t i o n a r y a n d i n v o l v e s a c e r t a i n d e g r e e o f p e r s o n a l j u d g m e n t " ( 1 9 7 9 , 2 1 0 ) . I n s o m e c a s e s , w h e n s t u d e n t s a r e u n a b l e t o m e e t t h e e s t a b l i s h e d s t a n d a r d s , t h e y m a y b e c o n s i d e r e d f o r d i s m i s s a l f r o m a p r o g r a m . E d u c a t i o n a l i n s t i t u t i o n s c a n n o t s i m p l y d i s m i s s s t u d e n t s w i t h o u t f i r s t g r a n t i n g t h e m a n o p p o r t u n i t y t o d i s c u s s a c a d e m i c p r o b l e m s w i t h r e p r e s e n t a t i v e s o f t h e i n s t i t u t i o n s ( I r b y a n d o t h e r s 1 9 8 1 , 1 0 8 ) . M a n y i n s t i t u t i o n s h a v e e s t a b l i s h e d a p p e a l s y s t e m s t o p r o v i d e s u c h a f o r u m . M o s t " [ u ] n i v e r s i t y 5 0 a p p e a l p r o c e d u r e s , u s u a l l y [ c o n s i s t o f ] t h r e e l e v e l s [ o f a p p e a l ] o r m o r e " ( K r i v y 1 9 8 2 , 1 8 0 ) . T h e s e a p p e a l " [ p ] r o c e d u r e s [ m a y ] b e p r i m a r i l y a r b i t r a t i v e o r m e d i a t i v e . " A r b i t r a t i o n p r o c e d u r e s " r e l y o n n o n - n e g o t i a t e d s e t t l e m e n t s r e a c h e d t y p i c a l l y t h r o u g h h e a r i n g b o a r d s o r p a n e l s ; w h i l e m e d i a t i o n " i n c l u d e [ s ] t h i r d - p a r t y i n t e r v e n o r s w h o h e l p t h e p a r t i e s , i n c o n f l i c t , c o n s t r u c t s o m e m u t u a l l y s a t i s f a c t o r y s o l u t i o n " ( F o l g e r a n d S h u b e r t 1 9 8 1 , 3 3 ) . M o s t s y s t e m s p r o v i d e f o r b o t h i n f o r m a l a n d f o r m a l p r o c e d u r e s . I n f o r m a l p r o c e d u r e s a r e r e c o m m e n d e d : . . . a t t h e i n i t i a l s t a g e s o f t h e g r i e v a n c e a n d t h e n b u i l d i n t h e o p t i o n f o r s t u d e n t s t o i n v o k e m o r e f o r m a l m e a n s f o r p r e s e n t i n g t h e i r g r i e v a n c e s i f t h e i s s u e r e m a i n s u n s e t t l e d . ( F o l g e r a n d S h u b e r t 1 9 8 1 , 3 3 ) I n s t i t u t i o n s g e n e r a l l y h a v e f o r m a l w r i t t e n p r o c e d u r e s w h i c h s p e c i f y t h e v a r i o u s s t e p s i n t h e i r g r i e v a n c e o r a p p e a l p r o c e s s e s w h i c h " a r e p u b l i s h e d i n s t u d e n t h a n d b o o k s , , u n i v e r s i t y c o d e s o f c o n d u c t , e t c . I n f o r m a l a d h o c p r o c e d u r e s a r e s e t u p b y i n s t i t u t i o n s a s g r i e v a n c e s a r i s e a n d u s u a l l y a r e n o t p u b l i s h e d " ( F o l g e r a n d S h u b e r t 1 9 8 1 , 3 2 ) . T h u s , p r a c t i c e s r e g a r d i n g h a n d l i n g o f g r i e v a n c e s m a y v a r y f r o m t h e p u b l i s h e d g u i d e l i n e s " b u t s u c h v a r i a t i o n [ i s ] u s u a l l y i n t h e d i r e c t i o n o f m o r e r a t h e r t h a n l e s s p r o c e d u r a l p r o t e c t i o n " ( G o l d e n 1 9 8 2 , 3 3 9 ) . G r i e v a n c e " s y s t e m s a r e u s u a l l y d e s i g n e d t o r e v i e w t h e p r o c e d u r e s b y w h i c h s t u d e n t s a r e e v a l u a t e d a n d d o n o t n o r m a l l y p e r m i t e x a m i n a t i o n o f a c a d e m i c j u d g m e n t s " ( P a v e l a 1 9 7 8 , 7 3 ) . T h e r e f o r e , w h e n f a c u l t y a r e c o n s i d e r i n g t h e d i s m i s s a l o r f a i l u r e o f s t u d e n t s f o r a c a d e m i c r e a s o n s , t h e y n e e d t o d e v e l o p " i n t e r n a l p r o c e d u r e s t o r e d u c e i n e q u i t i e s i n a c a d e m i c d e c i s i o n m a k i n g " ( P a v e l a 1 9 7 8 , 5 5 ) . S u c h a d e c i s i o n " . . . . r e q u i r e s a n e x p e r t e v a l u a t i o n o f c u m u l a t i v e i n f o r m a t i o n " ( I o v a c c h i n i 1 9 8 1 , 1 6 8 ) . B e f o r e t a k i n g a c t i o n , t h e f a c u l t y m u s t e n s u r e t h a t s t u d e n t s r e c e i v e a " f a i r h e a r i n g . " A f a i r h e a r i n g r e q u i r e s t h a t t h e s t u d e n t b e p r o v i d e d w i t h a n o p p o r t u n i t y t o k n o w t h e o t h e r s i d e L s c a s e a n d t o r e s p o n d t o t h o s e a l l e g a t i o n s p r i o r t o a d e c i s i o n b e i n g m a d e . O n e o f t h e d e f i c i e n c i e s i n a c a d e m i c d i s m i s s a l p r o c e e d i n g s i s t h e a b s e n c e o f " s o p h i s t i c a t e d r u l e s a n d s t a n d a r d s o f e v i d e n c e " ( G o l d e n 1 9 8 2 , 3 5 5 ) . I n o r d e r f o r a s t u d e n t 52 t o h a v e a d i s m i s s a l o r f a i l u r e d e c i s i o n o v e r t u r n e d o r q u a s h e d t h r o u g h a n a p p e a l p r o c e s s : [ t h e ] s t u d e n t m u s t s h o w t h a t t h e [ a c a d e m i c d e c i s i o n m a d e b y ] f a c u l t y f a i l e d t o t a k e t h e f a c t s o f t h e s i t u a t i o n i n t o a c c o u n t , d i d n o t a r r i v e a t a d e c i s i o n i n a l o g i c a l a n d r e a s o n e d m a n n e r , o r a c t e d f o r m a l i c i o u s r e a s o n s . ( I r b y a n d o t h e r s 1 9 8 1 , 1 1 3 ) A l t h o u g h t h e r e a p p e a r t o b e v o l u m e s o f m a t e r i a l r e l a t i n g t o m a n a g e m e n t o f s t u d e n t s w h o a r e n o t m e e t i n g a c a d e m i c s t a n d a r d s , t h e r e i s a d e a r t h o f s t u d i e s i n t h e a r e a o f p o l i c i e s a n d p r o c e d u r e s f o r g r i e v a n c e o r a p p e a l s y s t e m s i n h i g h e r e d u c a t i o n . O n l y o n e s u c h s t u d y h a s b e e n f o u n d . T h i s w a s c o n d u c t e d , i n t h e U n i t e d S t a t e s , b y G o l d e n ( 1 9 8 1 ) , w h o a n a l y z e d t h e w r i t t e n g r i e v a n c e a n d a p p e a l s s y s t e m s i n u s e i n a s a m p l e o f i n s t i t u t i o n s . G o l d e n f o u n d t h a t a l l s i x t y - t w o i n s t i t u t i o n s i n h i s s u r v e y h a d s y s t e m s i n p l a c e t o d e a l w i t h d i s c i p l i n a r y d i s m i s s a l s , b u t o n l y o n e - t h i r d o f t h e i n s t i t u t i o n s h a d s y s t e m s t o d e a l w i t h a c a d e m i c d i s m i s s a l s . H i s m o s t s i g n i f i c a n t f i n d i n g w a s t h a t i n s t i t u t i o n s w i t h a c a d e m i c d i s m i s s a l s y s t e m s w e r e g e n e r a l l y t h o s e w i t h 5 3 p r o f e s s i o n a l e d u c a t i o n p r o g r a m s l e a d i n g i n t o a p r a c t i c e p r o f e s s i o n s u c h a s m e d i c i n e , l a w , d e n t i s t r y , o r n u r s i n g i n w h i c h t h e a p p l i c a t i o n o f s p e c i a l i z e d d i s c i p l i n e s p e c i f i c k n o w l e d g e i s t a u g h t . G o l d e n ' s f i n d i n g s a r e a r e s u l t o f t h e a p p l i c a t i o n o f d i f f e r e n t p r o c e d u r a l r e q u i r e m e n t s o f t h e A m e r i c a n c o u r t s u s e d t o d i s m i s s s t u d e n t s f o r d i s c i p l i n a r y r a t h e r t h a n f o r a c a d e m i c r e a s o n s . I n p r o f e s s i o n a l e d u c a t i o n p r o g r a m s , a t t i t u d i n a l a s w e l l a s c o g n i t i v e a n d p s y c h o m o t o r s k i l l s a r e a s s e s s e d . W h e n a t t i t u d i n a l p r o b l e m s r e s u l t i n p o o r a p p r a i s a l s f o r c l i n i c a l w o r k , c o n f u s i o n e x i s t s a s t o w h e t h e r t h e s e p r o b l e m s a r e a c a d e m i c p r o b l e m s o r d i s c i p l i n a r y p r o b l e m s . T h i s c o n f u s i o n h a s l e d w r i t e r s t o s u g g e s t t h a t f u l l d i s c i p l i n a r y h e a r i n'g p r o v i s i o n s s h o u l d b e e m p l o y e d i n p r o f e s s i o n a l p r o g r a m s u n d e r s u c h c i r c u m s t a n c e s ( C a l o g e r o , 1 9 7 9 ; S p i n k , 1 9 8 3 ) . I n s t i t u t i o n a l e v a l u a t i o n p r o c e d u r e s a r e e x p e c t e d t o p r o v i d e a d m i n i s t r a t i v e d i r e c t i o n t o f a c u l t y , w h i l e a t t h e s a m e t i m e s a f e g u a r d i n g t h e r i g h t s o f s t u d e n t s . W h e n t h e s e p r o c e d u r e s d o n o t m e e t t h e s e e x p e c t a t i o n s , e x t e r n a l i n t e r v e n t i o n i n t o i n s t i t u t i o n a l a f f a i r s m a y 5 4 o c c u r . S u c h i n t e r v e n t i o n m a y b e i n t h e f o r m o f a j u d i c i a l r e v i e w b y t h e c o u r t s , a h e a r i n g b y t h e p r o v i n c i a l H u m a n R i g h t s C o u n c i l , o r a n i n v e s t i g a t i o n b y t h e p r o v i n c i a l o m b u d s m a n . L e g a l L i t e r a t u r e S e c o n d a r y l e g a l w r i t i n g s o n e d u c a t i o n a l i s s u e s a d d r e s s t h e p o t e n t i a l i m p a c t o f a d m i n i s t r a t i v e l a w , c o n t r a c t l a w , a n d c o m m o n l a w , o n t h e f u n c t i o n i n g o f i n s t i t u t i o n s . T h e s e a r e a s w i l l b e d i s c u s s e d i n d i v i d u a l l y . A d m i n i s t r a t i v e l a w , . T h i s a r e a o f l a w p r o v i d e s a m e c h a n i s m f o K t h e c h a l l e n g i n g o f d e c i s i o n s m a d e b y p u b l i c l y - f u n d e d i n s t i t u t i o n s w h e n t h e i r d e c i s i o n - m a k i n g e x c e e d s t h e b o u n d a r i e s o f t h e i r l e g i s l a t e d j u r i s d i c t i o n s . " A n a g e n c y a c t s w i t h i n i t s j u r i s d i c t i o n w h e n i t p r o p e r l y e x e r c i s e s t h e p o w e r s c o n f e r r e d u p o n i t b y s t a t u t e , r e g u l a t i o n , o r c o m m o n l a w " ( M a c K a y 1 9 8 4 , 1 1 ) . S i n c e , i n C a n a d a , m o s t e d u c a t i o n a l i n s t i t u t i o n s a r e p u b l i c l y f u n d e d , a d m i n i s t r a t i v e l a w c o n s i d e r a t i o n s a p p l y t o c e r t a i n a s p e c t s o f t h e i r o p e r a t i o n . E d u c a t i o n a l i n s t i t u t i o n s a r e e m p o w e r e d t o a c t u n d e r t h e p r o v i s i o n s o f t h e g o v e r n i n g s t a t u t e s p a s s e d . T h e s e 55 s t a t u t e s o f t e n d e s c r i b e t h e b r e a d t h o f t h e i n s t i t u t i o n s ' " p o w e r s a n d t h e c i r c u m s t a n c e s u n d e r w h i c h t h e s e p o w e r s c a n b e e x e r c i s e d . T h e l a w i s a p p l i e d t h r o u g h j u d i c i a l r e v i e w s w h i c h p r o v i d e " a n e x a m i n a t i o n b y t h e c o u r t s o f a d e c i s i o n m a d e b y a n a d m i n i s t r a t i v e o f f i c i a l o r b o a r d " ( M a c K a y 1 9 8 4 , 3 0 ) . T h i s e x a m i n a t i o n i s r e s t r i c t e d t o a n a s s e s s m e n t o f w h e t h e r " t h e d e c i s i o n w a s m a d e w i t h i n t h e b o a r d ' s p o w e r s a n d [ w h e t h e r ] p r o p e r p r o c e d u r e s w e r e f o l l o w e d " ( M a c K a y 1 9 8 4 , 3 0 ) . M o s t r e v i e w s f o c u s o n t h e l a t t e r , r a t h e r t h a n o n t h e d e c i s i o n i t s e l f ( M a c K a y 1 9 8 4 , 3 1 ) . A d m i n i s t r a t i v e l a w m a k e s p r o v i s i o n s f o r p u b l i c i n s t i t u t i o n o f f i c i a l s o r b o a r d s t o a c t a s a n a d m i n i s t r a t i v e t r i b u n a l . S t u d e n t s d i s s a t i s f i e d w i t h d e c i s i o n s r e a c h e d b y t h e s e b o d i e s c o u l d p e t i t i o n t h e c o u r t t o c o n d u c t j u d i c i a l r e v i e w s . T h e s e r e v i e w s , u n l i k e c o m m o n l a w p r o c e e d i n g s , d o n o t p r o v i d e t h e c o u r t w i t h t h e r i g h t t o c h a n g e d e c i s i o n s m a d e b y a p u b l i c a d m i n i s t r a t o r o r b o a r d . O n l y t h r e e r e m e d i e s c a n b e s o u g h t v i a a j u d i c i a l r e v i e w : c e r t i o r a r i , m a n d a m u s , a n d p r o h i b i t i o n . I f t h e r e m e d y o f c e r t i o r a r i i s b e i n g s o u g h t , t h e c o u r t w i l l r e v i e w t h e d e c i s i o n m a d e b y t h e 56 p u b l i c o f f i c i a l s a n d d e t e r m i n e i f t h e j u r i s d i c t i o n o f t h e o f f i c i a l s w a s e x c e e d e d . I f i t h a s b e e n , t h a t d e c i s i o n w i l l b e q u a s h e d a n d t h e o f f i c i a l s m a y b e r e q u e s t e d t o r e c o n s i d e r t h e c a s e . I f t h e r e m e d y o f m a n d a m u s i s b e i n g s o u g h t , t h e c o u r t , f o l l o w i n g a r e v i e w o f e v i d e n c e p r e s e n t e d , c o u l d o r d e r p u b l i c o f f i c i a l s t o c a r r y o u t a n u n p e r f o r m e d d u t y w i t h i n t h e i r j u r i s d i c t i o n . I f p r o h i b i t i o n i s s o u g h t , a n i n d i v i d u a l w i l l r e q u e s t t h a t t h e c o u r t o r d e r p u b l i c o f f i c i a l s n o t t o p r o c e e d w i t h m a k i n g a p l a n n e d d e c i s i o n , s i n c e t h a t d e c i s i o n i s b e y o n d t h e i r m a n d a t e d j u r i s d i c t i o n . W h e n p u b l i c o f f i c i a l s m a k e d e c i s i o n s w h i c h a f f e c t i n d i v i d u a l s , t h e y a r e r e q u i r e d t o a p p l y t h e r u l e s o f n a t u r a l j u s t i c e . T h e s e r u l e s e n s u r e t h a t t h e i n d i v i d u a l ^ r i g h t s a r e p r o t e c t e d ( K r i v y 1 9 8 2 , 1 1 8 ) . N a t u r a l j u s t i c e i s " a l e g a l c o n c e p t e n c o m p a s s i n g r u l e s o f j u d i c i a l p r o c e d u r e w h i c h h a v e b e e n f o r m u l a t e d b y t h e c o u r t s o v e r t h e c e n t u r i e s t o b r i n g a b o u t e q u i t y a n d f a i r n e s s " ( A l e x a n d e r 1 9 7 8 , 3 3 3 ) . F a i r p r o c e d u r e s r e q u i r e t h a t t h e d e c i s i o n - m a k e r i s n o t b i a s e d a g a i n s t t h e c a s e b e i n g h e a r d a n d t h a t t h e i n d i v i d u a l w h o i s a f f e c t e d b y t h e d e c i s i o n . i h a s a n o p p o r t u n i t y t o p r e s e n t h i s o r h e r c a s e b e f o r e t h e o f f i c i a l s m a k e t h e d e c i s i o n ( M a c K a y 1 9 8 4 , 3 1 ) . B i a s m a y a r i s e f r o m t w o s o u r c e s : f i n a n c i a l i n t e r e s t s o r s o m e r e l a t i o n s h i p w i t h a p a r t y w i t n e s s i n v o l v e d i n t h e c a s e . I n t h e f o r m e r c a s e " d e c i s i o n - m a k e r s m u s t n o t h a v e a m a t e r i a l i n t e r e s t i n t h e r e s u l t [ o f a h e a r i n g ] " a n d i n t h e l a t t e r c a s e " t h e c o n t e x t [ o f t h e d e c i s i o n ] m u s t n o t c r e a t e a r e a s o n a b l e l i k e l i h o o d o f b i a s o r a r e a s o n a b l e a p p r e h e n s i o n o r s u s p i c i o n o f b i a s o f a d e c i s i o n - m a k e r " ( E v a n s a n d o t h e r s 1 9 8 4 , 2 1 9 - 2 2 0 ) . C h a r g e s b y s t u d e n t s o f b i a s i n e d u c a t i o n a l m a t t e r s w o u l d n o t l i k e l y b e r e l a t e d t o f i n a n c i a l i n t e r e s t s o f h e a r i n g p a n e l m e m b e r s . H o w e v e r b i a s d u e t o t h e r e l a t i o n s h i p s o f h e a r i n g p a n e l m e m b e r s 1 ' i n v o l v e m e n t w i t h t h e c a s e i s l i k e l y t o b e c h a r g e d b y s t u d e n t s . E v a n s , J a n i s c h , M u l l a n , a n d R i s k i d e n t i f y t h r e e t y p e s o f r e l a t i o n s h i p s w h i c h c o u l d l e a d t o c h a r g e s o f b i a s . T h e s e a r e : ( a ) " a n a s s o c i a t i o n b e t w e e n o n e o f t h e p a r t i e s a n d a d e c i s i o n - m a k e r " , ( b ) " a n i n v o l v e m e n t b y a d e c i s i o n - m a k e r i n a p r e l i m i n a r y s t a g e o f t h e d e c i s i o n " , a n d ( c ) " a n a t t i t u d e o f a d e c i s i o n - m a k e r t o w a r d t h e o u t c o m e " ( 1 9 8 4 , 2 2 0 ) . I n p r o g r a m s w h e r e t h e s a m e a d m i n i s t r a t o r s m a y b e r e q u i r e d t o m a k e q u a s i - j u d i c i a l d e c i s i o n s a t m o r e t h a n o n e l e v e l , t h e r u l e s o f n a t u r a l j u s t i c e m a y o p e r a t e t o s t o p s u c h a c t i o n s a n d d e c i s i o n s b e i n g m a d e . T h e r u l e a g a i n s t b i a s w i l l l i k e l y i n v a l i d a t e t h e d e c i s i o n - m a k i n g o f s u c h a p a n e l b e c a u s e t h e p r e v i o u s l y k n o w n f a c t s a n d b a c k g r o u n d a b o u t t h e s t u d e n t L s p e r f o r m a n c e c o u l d r e a s o n a b l y b e e x p e c t [ e d ] o r b e f o r e s e e n t o i n f l u e n c e t h e l i k e l i h o o d o f a n o b j e c t i v e j u d g m e n t ( A l e x a n d e r 1 9 7 8 , 3 4 2 ) . T h e r e f o r e , a b r e a c h o f n a t u r a l j u s t i c e c o u l d b e f o u n d t h r o u g h a j u d i c i a l r e v i e w , i f o f f i c i a l s m a d e d e c i s i o n s o u t s i d e o f t h e i r j u r i s d i c t i o n , u s e f a u l t y p r o c e d u r e s , o r s h o w e v i d e n c e o f b a d f a i t h ( S c o t t 1 9 7 7 , 1 5 ) . H o w e v e r , " t h e f o r m a l c o u r t s y s t e m i s l o a t h t o r e v i e w c a s e s w h i c h h a v e n o t e x h a u s t e d t h e o t h e r r e m e d i a l i n s t r u m e n t s a v a i l a b l e " ( S p i r o 1 9 7 8 , 4 2 ) . T h e S u p r e m e C o u r t o f C a n a d a h a s - s e t o u t t h e a b o v e p o s i t i o n i n H a r e l k i n v . U n i v e r s i t y o f R e g i n a [ 1 9 7 9 ] 3 WWR 6 7 3 . I n t h i s c a s e , a s t u d e n t w a s i n f o r m e d t h a t h e w a s d i s m i s s e d f r o m h i s p r o g r a m o f s t u d i e s . H e t h e n r e q u e s t e d a h e a r i n g b e f o r e t h e c o m m i t t e e o f c o u n c i l . T h i s c o m m i t t e e c o n d u c t e d a h e a r i n g , w i t h o u t H a r e l k i n b e i n g p r e s e n t , a n d u p h e l d t h e e a r l i e r d e c i s i o n . H a r e l k i n t h e n r e q u e s t e d a r e - h e a r i n g b e f o r e t h e s a m e c o m m i t t e e s o t h a t h e c o u l d p r e s e n t h i s o w n e v i d e n c e , h o w e v e r , t h i s r e q u e s t w a s d e n i e d . T h e u n i v e r s i t y A c t p r o v i d e d f o r a f u r t h e r a p p e a l t o t h e S e n a t e A p p e a l C o m m i t t e e b u t H a r e l k i n d i d n o t e x e r c i s e h i s r i g h t t o t h i s l e v e l o f h e a r i n g . I n s t e a d h e b r o u g h t a p p l i c a t i o n f o r " c e r t i o r a r i t o q u a s h t h e o r d e r o f c o u n c i l " a n d " m a n d a m u s t o r e q u i r e t h e u n i v e r s i t y t o h o l d a h e a r i n g . " A t t h e i n i t i a l h e a r i n g H a r e l k i n w a s s u c c e s s f u l b u t o n a p p e a l t o t h e S a s k a t c h e w a n C o u r t o f A p p e a l t h e i n i t i a l r u l i n g w a s o v e r t u r n e d . H a r e l k i n t h e n a p p e a l e d t o t h e S u p r e m e C o u r t o f C a n a d a . I t w a s t h e n r u l e d t h a t t h e c o u n c i l h a d b r e a c h e d t h e r u l e s o f n a t u r a l j u s t i c e . H o w e v e r , h a d H a r e l k i n t a k e n h i s c o m p l a i n t s t o t h e S e n a t e C o m m i t t e e , t h i s w r o n g c o u l d h a v e b e e n c o r r e c t e d . T h e r e f o r e , t h e o u t c o m e w a s a d e n i a l o f H a r e l k i n L s a p p e a l b e c a u s e h e h a d n o t e x h a u s t e d h i s i n t e r n a l r e m e d i e s [ 9 6 D . L . R . ( 3 d ) 1 4 - 5 8 ] . A d j u d i c a t i o n s w i t h i n i n s t i t u t i o n s " d o n o t a l w a y s r e q u i r e a f o r m a l h e a r i n g , o r t h e p r e s e n c e o f t h e a p p e l l a n t , p r o v i d e d t h e c a s e w a s p r e s e n t e d t o t h e a p p e a l s c o m m i t t e e b y w a y o f c o r r e s p o n d e n c e , b r i e f s , o r o t h e r m e c h a n i s m s " ( K r i v y 1 9 8 2 , 1 4 7 ) . H o w e v e r , Alexander states that there i s some controversy over1, whether natural j u s t i c e i s f u l l y served i f only written submissions form the basis of the student's presentation to the adjudicators (1978, 344). He concludes that without a verbal hearing, written submissions by the student conform with the rules of natural j u s t i c e provided students have access to a l l evidence presented prior to making the written submission. Students have also demanded the right to be represented by legal counsel at these appeals but the "presence of leg a l counsel i s not a fundamental element of fairn e s s " (Alexander 1978, 350). In summary, the courts w i l l quash the decision of an i n t e r n a l adjudicator or appeal panel regarding academic dismissals i n only three situations: (a) when the le g a l or contractual rights of students have been infringed upon or abrogated, (b) when there i s a f a i l u r e by the public i n s t i t u t i o n to perform i t s statutory duties, or (c) when there i s a denial of natural j u s t i c e (Krivy 1982, 130). Contract Law. The relationship between an educational i n s t i t u t i o n and a student i s contractual, according to Jennings (1980*81). She reports that contract law has 6 1 J e n n i n g s ( 1 9 8 0 - 8 1 ) . S h e r e p o r t s t h a t c o n t r a c t l a w h a s b e e n a p p l i e d , i n t h e U n i t e d S t a t e s , t o " d i s p u t e s a b o u t p r o g r a m t e r m i n a t i o n s , q u a l i t y o f a c a d e m i c p r o g r a m s , r e f u s a l s t o g r a n t a d e g r e e , c h a n g e s i n r e q u i r e m e n t s d u r i n g a s t u d e n t ' s t e n u r e , a c a d e m i c d i s m i s s a l s , a n d a c a d e m i c d i s m i s s a l p r o c e d u r e s " ( 1 9 8 0 - 8 1 , 1 2 3 ) . I n h e r a n a l y s i s o f c a s e s w h e r e c o n t r a c t l a w h a s b e e n a p p l i e d , s h e r e p o r t s t h a t : . . . . t h e c o n t r a c t c a s e s r e v i e w e d a r e m o s t n o t a b l e f o r t h e i r l a c k o f a g r e e m e n t o n a l m o s t a n y a p p l i c a t i o n o f p a r t i c u l a r a s p e c t s o f c o n t r a c t l a w d o c t r i n e . T h e y d i s a g r e e a s t o w h a t c o n s t i t u t e s t h e o f f e r a n d w h a t t h e a c c e p t a n c e . T h e y d i s a g r e e a s t o w h e t h e r t h e d u r a t i o n o f t h e c o n t r a c t i s o n e t e r m , o n e y e a r - o r t h e l e n g t h o f t h e e n t i r e c o u r s e o f s t u d y . C a s e s d i f f e r a s t o w h e t h e r t h e c o n t r a c t i s e n t i r e a n d i n d i v i s i b l e ; a n d w h a t t h a t m e a n s . ( J e n n i n g s 1 9 8 0 - 8 1 , 2 1 7 ) T h u s , t h e r e i s a n o n - t r a d i t i o n a l a p p l i c a t i o n o f c o n t r a c t l a w t o h i g h e r e d u c a t i o n , m e a n i n g t h a t t h e c o n t r a c t u a l r e l a t i o n s h i p i s " o b v i o u s l y n o t o n e i n w h i c h t h e p a r t i e s n e g o t i a t e d a n a g r e e m e n t w h i c h i s e m b o d i e d i n a s i n g l e w r i t t e n d o c u m e n t . I t i s o n e o f m u t u a l o b l i g a t i o n s i m p l i e d b y l a w " ( N o r d i n 1 9 8 1 - 8 2 1 5 2 ) . U n d e r s u c h a c o n t r a c t , e d u c a t i o n a l i n s t i t u t i o n s a g r e e t o p r o v i d e s t u d e n t s w i t h p r e s c r i b e d p r o g r a m s i n e x c h a n g e f o r s t u d e n t s ' " p a y m e n t o f f e e s a n d a g r e e m e n t s t o a b i d e b y t h e r u l e s o f t h e s e i n s t i t u t i o n s . O b v i o u s l y t h e e d u c a t i o n a l i n s t i t u t i o n h a s a g r e a t e r d e g r e e o f p o w e r o v e r t h e s t u d e n t t h a n t h e r e v e r s e a n d , a s s u c h , e x e r c i s e s a g r e a t e r d e g r e e o f p o w e r i n t h e c o n t r a c t u a l r e l a t i o n s h i p . T h e c o u r t s t e n d t o f a v o u r e d u c a t i o n a l i n s t i t u t i o n s i n c a s e s w h e r e t h e i r a c a d e m i c d e c i s i o n - m a k i n g i s q u e s t i o n e d . I n f a c t , " t h e c l o s e r t h e d i s p u t e i n t r u d e s o n s t r i c t l y a c a d e m i c r e l a t i o n s h i p s , t h e m o r e r e l u c t a n t t h e c o u r t s a r e t o o v e r t u r n a d e c i s i o n m a d e b y e d u c a t o r s " ( J e n n i n g s 1 9 8 0 - 8 1 , 2 2 1 ) . T h e r e f o r e , i n c a s e s i n v o l v i n g c l i n i c a l f a i l u r e , s t u d e n t s a r e l e s s l i k e l y t o r e s o r t t o a p p l i c a t i o n o f c o n t r a c t l a w t h a n t o p l e a d f o r a j u d i c i a l r e v i e w u n d e r a d m i n i s t r a t i v ' e - 1 a w . A n o t h e r a l t e r n a t i v e t h a t s t u d e n t s m a y u s e t o d e a l w i t h c l i n i c a l f a i l u r e s w o u l d b e c h a r g i n g e d u c a t o r s w i t h e d u c a t i o n a l m a l p r a c t i c e . C o m m o n L a w . L e g a l w r i t i n g s i d e n t i f y t w o a r e a s w h e r e s t u d e n t s m a y s u e e d u c a t i o n a l o f f i c i a l s : t h e s e b e i n g 63 d e f a m a t i o n o f c h a r a c t e r a n d e d u c a t i o n a l m a l p r a c t i c e . I n t h e f o r m e r c a s e d e f a m a t i o n o f c h a r a c t e r c o u l d b e c h a r g e d i n c a s e s w h e r e a r e f e r e n c e h a s b e e n p r o v i d e d b y o n e i n s t i t u t i o n t o a n o t h e r c o n c e r n i n g a s t u d e n t L s w e a k n e s s e s i n t h e f o r m e r p r o g r a m ; a n d t h e s t u d e n t f e l t t h a t t h i s r e f e r e n c e " t e n d s t o l o w e r [ h i s o r h e r ] r e p u t a t i o n . . . a m o n g h i s o r h e r f e l l o w s a n d i s b a s e d u p o n f a l s e h o o d s . " ( M a c K a y 1 9 8 4 , 2 7 5 ) . T h e d e f e n s e t o s u c h a c h a r g e i s " q u a l i f i e d p r i v i l e g e . " T h a t i s , t h e e d u c a t o r p r o v i d i n g t h e r e f e r e n c e h a s a r i g h t a n d d u t y t o c o m m u n i c a t e t h e i n f o r m a t i o n . T h i s r i g h t a n d d u t y w o u l d b e a c c e p t e d i f i t w e r e s h o w n t h a t t h e e d u c a t o r h a s : ( a ) a d u t y t o i n f o r m , ( b ) a b e l i e f i n t h e t r u t h o f t h e s t a t e m e n t " , . ( c ) a r e a s o n t o b e l i e v e i n t h e t r u t h o f t h e s t a t e m e n t , a n d ( d ) l i m i t e d i n f o r m a t i o n ( C o n n o r s , 1 9 8 1 ; 1 3 0 ) . I n m o s t c a s e s , i t w o u l d b e e x t r e m e l y u n l i k e l y t h a t a s t u d e n t c o u l d s u c c e e d i n p r o v i n g s u c h a c h a r g e a g a i n s t h i s o r h e r e d u c a t o r s . ' A l t h o u g h t h e r e a r e a g r e a t m a n y s e c o n d a r y w r i t i n g s a b o u t p o t e n t i a l e d u c a t i o n a l m a l p r a c t i c e s u i t s , i n r e a l i t y t h e r e h a v e o n l y b e e n a p p r o x i m a t e l y t e n c a s e s b r o u g h t b e f o r e t h e c o u r t s i n t h e U n i t e d S t a t e s w i t h n o n e b e i n g s u c c e s s f u l f o r t h e p l a i n t i f f s . S u c h s u i t s 6 4 a r e b r o u g h t b e f o r e t h e c o u r t s t o s e e k " r e d r e s s [ f o r ] s t u d e n t s w h o h a v e n o t r e c e i v e d f u l l e d u c a t i o n a l b e n e f i t s w h e n t e a c h e r s n e g l i g e n t l y o r i n t e n t i o n a l l y f a i l e d t o c o n f o r m t o m i n i m u m s t a n d a r d s o f p r o f e s s i o n a l c o m p e t e n c e . . . " ( P a t t e r s o n 1 9 8 0 , 1 9 4 ) . T h e p r e c e d e n t s e t t i n g c a s e i s P e t e r VI. v . S a n F r a n c i s c o U n i f i e d S c h o o l D i s t r i c t . 6 0 C A . 3 d 8 1 4 , 1 3 1 C a l . R p t r . 8 5 4 ( 1 9 7 6 ) . P e t e r W . w a s a s t u d e n t w h o g r a d u a t e d w i t h a h i g h s c h o o l d i p l o m a w h i l e h e h a d o n l y a 5 t h g r a d e r e a d i n g a b i l i t y . I n C a l i f o r n i a t h e r e i s a s t a t u t e w h i c h r e q u i r e s t h a t a l l h i g h s c h o o l g r a d u a t e s h a v e t h e a b i l i t y t o r e a d a t a l e v e l a b o v e t h e 8 t h g r a d e ( C o n n o r s 1 9 8 1 , 1 4 9 ) . I n t h i s c a s e t h e c o u r t w a s a s k e d t o m a k e a l e g a l c o n n e c t i o n b e t w e e n t e a c h i n g ( a s a s e r i e s o f s p e c i f i c , q u a l i t a t i v e l y a s s e s s a b l e a c t s ) a n d l e a r n i n g ( a s s p e c i f i c , a s s e s s a b l e p e r f o r m a n c e s ) , a c o n n e c t i o n , a c a u s e - e f f e c t r e l a t i o n s h i p w h i c h s e r i o u s r e s e a r c h e r s o f t h e l e a r n i n g p r o c e s s h a v e s t u d i e d f o r m a n y y e a r s a n d o n w h i c h , t o d a t e , t h e y h a v e n o d e f i n i t i v e d a t a . ( H a z a r d 1 9 7 8 , 2 8 3 ) . T h e c o u r t r u l e d a g a i n s t P e t e r W . a n d t h i s d e c i s i o n w a s u p h e l d u p o n a p p e a l . I n a s u b s e q u e n t c a s e , D o n o h u e v . 65 C o p i a g u e U n i o n F r e e S c h o o l D i s t r i c t , 4 0 7 N . Y . S . 2 d 8 7 4 , A . D . 2 d 2 9 ( 1 9 7 8 ) t h e c o u r t c o n c l u d e d T h e f a i l u r e t o l e a r n d o e s n o t b e s p e a k a f a i l u r e t o t e a c h . I t i s n o t a l l e g e d t h a t t h e p l a i n t i f f ' s c l a s s m a t e s , w h o w e r e e x p o s e d t o t h e i d e n t i c a l c l a s s r o o m i n s t r u c t i o n , a l s o f a i l e d t o l e a r n . [ 4 0 7 N . Y . S . ( 2 d ) 8 7 4 , A . D . 2 d 2 9 ( 1 9 7 8 ) ] I n r e a l i t y t h e r e h a v e n o t b e e n a n y c a s e s i n v o l v i n g e d u c a t i o n a l i n s t i t u t i o n s b r o u g h t b e f o r e t h e c o u r t s i n C a n a d a u p t o t h e p r e s e n t . T o b e s u c c e s s f u l i n s u c h a c a s e , s t u d e n t s w o u l d h a v e t o p r o v e t h a t e s t a b l i s h e d a c a d e m i c s t a n d a r d s w e r e n o t m e t . H o w e v e r , " t h e c o u r t s a r e n o t e q u i p p e d t o r e v i e w a c a d e m i c r e c o r d s b a s e d u p o n a c a d e m i c s t a n d a r d s w i t h i n t h e p a r t i c u l a r k n o w l e d g e , e x p e r i e n c e a n d e x p e r t i s e o f a c a d e m i c i a n s " ( M a r x , 1 9 8 3 ; 4 3 ) . T h u s , " f a c t o r s f a v o r j u d i c i a l d e f e r e n c e t o s c h o l a s t i c d i s m i s s a l p r o c e d u r e s - - c o u r t s h a v e c o n t i n u a l l y e x p r e s s e d t h e v i e w t h a t a c a d e m i c d i s m i s s a l s i n v o l v e e x p e r t i s e t h a t t h e j u d i c i a r y d o e s n o t p o s s e s s " ( B r o c k , 1 9 7 9 ) . L e g a l s u p p o r t f o r a s t u d e n t ' s c l a i m o f e d u c a t i o n a l m a l p r a c t i c e a g a i n s t a n e d u c a t o r w o u l d b e d e p e n d e n t o n 66 p r o v i n g t h a t s p e c i f i c s t a n d a r d s w e r e n o t m e t . T h e c o u r t w o u l d n e e d t o e s t a b l i s h w h a t s t a n d a r d s a " r e a s o n a b l e m a n " w o u l d u s e i n t h e s a m e s e t o f c i r c u m s t a n c e s . S u c h a c o m p a r i s o n i s d i f f i c u l t t o e s t a b l i s h b e c a u s e o f " t h e v a g u e u n d e f i n e d p r i n c i p l e s t h a t c h a r a c t e r i z e t h e f i e l d ; t h e a b s e n c e o f s t a n d a r d s , i n f a c t , h a s m i t i g a t e d a g a i n s t t h e i m p o s i t i o n o f l i a b i l i t y " ( K l e i n , 1 9 7 9 ; 4 0 ) . T h e s t u d e n t w o u l d a l s o b e r e q u i r e d t o s h o w a d i r e c t c a u s a l " b u t f o r " l i n k a g e b e t w e e n t h e e d u c a t o r ' s f a i l u r e t o t e a c h a n d t h e s t u d e n t ' s f a i l u r e t o l e a r n . C o n s i d e r i n g t h e i n n u m e r a b l e v a r i a b l e s w h i c h c a n i n t e r f e r e w i t h s t u d e n t s 1 ' a b i l i t y t o l e a r n i s a n o n g o i n g a r e a o f r e s e a r c h i n e d u c a t i o n . C o n s e q u e n t l y , t h e r e i s n o k n o w n c l e a r r e l a t i o n s h i p w h i c h c o u l d b e e s t a b l i s h e d t o s u p p o r t s u c h a l i n k a g e . T h u s , t h e r e l a t i o n s h i p b e t w e e n p o o r t e a c h i n g ( i . e . n e g l i g e n t t e a c h i n g ) , b y t h e e d u c a t o r , a n d t h e l a c k o f l e a r n i n g , ' b y t h e s t u d e n t w o u l d b e e x t r e m e l y d i f f i c u l t t o p r o v e . I n s u m m a r y , t h e a b i l i t y o f e d u c a t o r s t o p r o v i d e f a i r a n d e q u i t a b l e c l i n i c a l e v a l u a t i o n s f o r s t u d e n t s c a n b e p o t e n t i a l l y a f f e c t e d b y : v a r i a b l e s u s e d t o m e a s u r e s t u d e n t s ' " p e r f o r m a n c e s , t h e r e l a t i o n s h i p 6 7 b e t w e e n t h e c o m p l e x i t y o f s t u d e n t s 1 ' c l i n i c a l p e r f o r m a n c e e x p e c t a t i o n s a n d t h e d e g r e e o f s u b j e c t i v i t y o f a p p r a i s a l s , e v a l u a t o r s 1 ' p r o f e s s i o n a l s o c i a l i z a t i o n e x p e c t a t i o n s o f s t u d e n t s , e v a l u a t o r s x e x p e r t i s e i n a s s e s s m e n t o f s t u d e n t s 1 - p e r f o r m a n c e s , t h e d e g r e e o f i n t e r - a n d i n t r a - r a t e r r e l i a b i l i t y o f e v a l u a t o r s 1 " a s s e s s m e n t o f s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e s , a n d e v a l u a t o r s 1 " p e r s o n a l v a l u e s . T h e s e f a c t o r s c a n l e a d t o d i s t o r t i o n s i n t h e e v a l u a t o r s L p e r c e p t i o n o f s t u d e n t s ' p e r f o r m a n c e s r e s u l t i n g i n t h e s t u d e n t s f e e l i n g t h a t t h e y h a v e b e e n j u d g e d u n f a i r l y . S t u d e n t s d e m o n s t r a t e t h e a b o v e f e e l i n g s b y s e e k i n g r e d r e s s t h r o u g h g r i e v a n c e a n d a p p e a l h e a r i n g s w i t h i n e d u c a t i o n a l i n s t i t u t i o n s . S u c h h e a r i n g s h a v e b e e n e s t a b l i s h e d t o p r o v i d e a m e a n s o f e n s u r i n g t h a t b o t h e d u c a t o r s ' " a n d s t u d e n t s ' r i g h t s a r e p r o t e c t e d . P r o c e d u r e s f o r t h e s e h e a r i n g s u s u a l l y c o n t a i n : s p e c i f i c t i m e l i m i t s , i d e n t i f i c a t i o n o f r e a s o n f o r g r i e v a n c e , p r o c e s s f o r s e l e c t i o n o f t h e h e a r i n g p a n e l , s t e p s i n t h e p r o c e s s , a n d t h e p r o c e s s f o r c o m m u n i c a t i n g a d j u d i c a t i v e d e c i s i o n s . 68 I n t h e e v e n t t h a t s t u d e n t s a r e u n a b l e t o h a v e t h e i r e v a l u a t i v e d e c i s i o n s a l t e r e d b y w a y o f t h e e d u c a t i o n a l i n s t i t u t i o n ' s i n t e r n a l r e v i e w m e c h a n i s m s , t h e y m a y r e q u e s t a j u d i c i a l r e v i e w t h r o u g h t h e c o u r t s . T h e c o u r t s w i l l p r o v i d e s u c h a r e v i e w w h e n t h e r e i s a v i o l a t i o n o f t h e s t u d e n t ' s r i g h t s o r w h e n t h e e d u c a t i o n a l i n s t i t u t i o n h a s a c t e d o u t s i d e i t s l e g i s l a t i v e l y m a n d a t e d r o l e . T h e c o u r t s a r e h e s i t a n t t o i n t e r f e r e w i t h s u b s t a n t i v e a c a d e m i c d e c i s i o n s b e c a u s e t h e y v i e w e d u c a t o r s a s e x p e r t s i n t h e d e t e r m i n a t i o n o f s t u d e n t s 1 ' a c a d e m i c p e r f o r m a n c e s . O t h e r a s p e c t s o f e d u c a t i o n i n s t i t u t i o n s ' t r a d i t i o n a l p r e r o g a t i v e s w h i c h m a y b e o p e n i n g u p t o j u d i c i a l c h a l l e n g e s b y d i s s a t i s f i e d s t u d e n t s a r e : c h a r g i n g i n s t i t u t i o n s w i t h a b r e a c h o f t h e i r c o n t r a c t s , c h a l l e n g i n g i n s t r u c t o r s ' " c o m p e t e n c e t o t e a c h , a n d c h a r g e s o f d e f a m a t i o n o f c h a r a c t e r o v e r r e f e r e n c e s s e n t t o o t h e r e d u c a t i o n a l i n s t i t u t i o n s . T h e l i t e r a t u r e r e v i e w e d p r o v i d e d i n s i g h t s i n t o t h e w i d e v a r i a t i o n s i n w r i t e r s ' " v i e w s a b o u t t h e c l i n i c a l e v a l u a t i o n p r o c e s s a n d a l s o t h e l a c k o f c o n s i s t e n t a p p r o a c h e s t o t h e i m p l e m e n t a t i o n o f g r i e v a n c e a n d 69 a p p e a l s y s t e m s f o r a s s e s s i n g e v a l u a t i o n d e c i s i o n s . T h r e e major themes r e l a t i n g t o t h e f o r m u l a t i o n o f d e c i s i o n s r e g a r d i n g s t u d e n t s ' c l i n i c a l p e r f o r m a n c e and s u b s e q u e n t r e v i e w s o f t h o s e d e c i s i o n s were i d e n t i f i e d . T h e s e b e i n g , t h e p r o f e s s i o n a l a p p r a i s a l o f s t u d e n t s by n u r s e e d u c a t o r s ; t h e a p p l i c a t i o n o f i n s t i t u t i o n a l p o l i c i e s and p r o c e d u r e s d u r i n g t h e f o r m u l a t i o n and r e v i e w p r o c e s s e s ; and t h e p r o t e c t i o n o f s t u d e n t s ' r i g h t s . A f u r t h e r theme emerged r e g a r d i n g t h e u n c o n s c i o u s f a c t o r s w h i c h c a n i n t e r f e r e w i t h an e d u c a t o r ' s d e c i s i o n m a k i n g a b i l i t y r e g a r d i n g a s t u d e n t . I n c o n c l u s i o n , f r o m t h e l i t e r a t u r e r e v i e w e d t h r e e e l e m e n t s were i d e n t i f i e d as b e i n g i n v o l v e d i n t h e f o r m u l a t i o n o f c l i n i c a l e v a l u a t i v e j u d g m e n t s : t h e a c a d e m i c component ( i . e . , c o n c l u s i o n s r e a c h e d a b o u t s t u d e n t s ' c l i n i c a l p e r f o r m a n c e b a s e d on t h e p r o f e s s i o n a l judgment o f t h e e v a l u a t o r ) ; t h e a d m i n i s t r a t i v e component ( i . e . , t h e p r o c e s s t h e e v a l u a t o r u s e s i n a r r i v i n g a t t h e c o n c l u s i o n ) ; and t h e component o f n a t u r a l j u s t i c e ( i . e . , w h ether c o n c l u s i o n s r e a c h e d were made f a i r l y and e q u i t a b l y ) . T h e s e e l e m e n t s became t h e b a s i s o f t h e c o n c e p t u a l framework 7 0 for the study and w i l l be explained more f u l l y in chapter 3. 71 C H A P T E R 3 C O N C E P T U A L F R A M E W O R K — * T h e c o n c e p t u a l f r a m e w o r k f o r t h i s s t u d y , a s s u m m a r i z e d i n t h e p r e v i o u s c h a p t e r , i s d e r i v e d f r o m t h e l i t e r a t u r e r e v i e w e d . T h i s c h a p t e r w i l l i n i t i a l l y d e s c r i b e a n d d i s c u s s t h e o v e r a l l c o n c e p t u a l m o d e l f o l l o w e d b y a d e s c r i p t i o n o f h o w t h i s m o d e l , s p e c u l a t i v e l y , w o u l d b e a p p l i e d w i t h i n t h e e v a l u a t i v e d e c i s i o n - m a k i n g a n d r e v i e w p r o c e s s e s o f e d u c a t i o n i n s t i t u t i o n s . ; F i n a l l y , t h e c o n s o l i d a t i o n o f b o t h o f t h e a b o v e w i l l b e p r e s e n t e d i n t o a f u r t h e r m o d e l w h i c h w a s d e s i g n e d t o p r o v i d e d i r e c t i o n f o r t h e d e v e l o p m e n t o f t h e s t u d y ' s s u r v e y t o o l s . C o n c e p t u a l M o d e l T h e a c a d e m i c c o m p o n e n t , t h e a d m i n i s t r a t i v e c o m p o n e n t , a n d t h e c o m p o n e n t o f n a t u r a l j u s t i c e a r e d e p i c t e d i n t h e c o n c e p t u a l m o d e l ( s e e F i g u r e 1) a s i n t e r d e p e n d e n t e l e m e n t s i n v o l v e d i n t h e d e c i s i o n - m a k i n g p r o c e s s a b o u t a s t u d e n t ' s c l i n i c a l p e r f o r m a n c e . T h e F i g . 1. Judgment Model K3 73 f i r s t e l e m e n t r e f e r s t o t h e d a t a c o l l e c t e d b y t h e e v a l u a t o r a b o u t a s p e c i f i c s t u d e n t ' s c l i n i c a l p e r f o r m a n c e . T h e s e d a t a , w h e n c o m p a r e d w i t h p r e - e s t a b l i s h e d a c a d e m i c s t a n d a r d s , r e s u l t i n a n # a c a d e m i c c o n c l u s i o n . T h e s e c o n d e l e m e n t , t h e a d m i n i s t r a t i v e c o m p o n e n t , r e f e r s n o t o n l y t o t h e p r o c e d u r e s u s e d b y t h e e v a l u a t o r t o c o l l e c t d a t a , b u t a l s o t o t h e p r o c e s s u s e d b y t h e i n s t r u c t o r t o f o r m u l a t e a n d c o m m u n i c a t e t o t h e s t u d e n t , h i s o r h e r p e r c e p t i o n o f t h e s t u d e n t ' s c l i n i c a l p e r f o r m a n c e . T h e w a y i n w h i c h t h e s t a n d a r d s a r e a p p l i e d a n d t h e m e t h o d u s e d t o m a k e t h e s t u d e n t a w a r e o f h i s o r h e r c l i n i c a l p e r f o r m a n c e s r e c o n t r o l l e d t h r o u g h t h e a p p l i c a t i o n o f p r o v i s i o n s o f n a t u r a l j u s t i c e . T h a t i s t o s a y , t h e r u l e s o f n a t u r a l j u s t i c e a r e a p p l i e d t o e n s u r e t h a t t h e s t u d e n t w a s t r e a t e d f a i r l y a n d e q u i t a b l y . A p p l i c a t i o n o f t h e M o d e l t o R e v i e w s o f C l i n i c a l E v a l u a t i v e D e c i s i o n s T h e a p p l i c a t i o n o f t h e c o m p o n e n t s o f t h e J u d g m e n t M o d e l t o t h e r e v i e w p r o c e s s e s p r o v i d e d b o t h w i t h i n a n d w i t h o u t i n s t i t u t i o n s i s b a s e d o n a r e v i e w o f t h e l i t e r a t u r e o n a d m i n i s t r a t i v e p r a c t i c e s a n d t h e n u r s i n g 74 e d u c a t i o n e x p e r i e n c e o f t h e r e s e a r c h e r . T h e r e f o r e , i t r e p r e s e n t s a p r o t o t y p e o f w h a t i s s p e c u l a t e d t o o c c u r w i t h i n m o s t n u r s i n g p r o g r a m s . I t w i l l p r o v i d e a " s t a n d a r d " a g a i n s t w h i c h d a t a o b t a i n e d f r o m t h e s t u d y r e s p o n d e n t s c a n b e c o m p a r e d . A d e s c r i p t i o n o f t h i s " s p e c u l a t e d " p r o c e s s f o l l o w s . I f t h e s t u d e n t r e q u e s t s a r e a s s e s s m e n t o f t h e j u d g m e n t , t h i s i n i t i a l r e v i e w w o u l d b e c a l l e d a " g r i e v a n c e " ( s e e F i g u r e 2). T h e r e v i e w o f t h i s g r i e v a n c e ( t h e g r i e v a n c e r e v i e w ) w o u l d b e i n t e r n a l t o t h e i n s t i t u t i o n a n d w o u l d r e - e v a l u a t e t h e a c a d e m i c c o n c l u s i o n r e a c h e d w i t h i n t h e p r o g r a m u n i t . I f t h e a c a d e m i c c o n c l u s i o n i s u p h e l d , t h e s t u d e n t m a y t h e n a p p l y f o r a n A p p e a l H e a r i n g o f t h e d e c i s i o n . S u c h a h e a r i n g w o u l d i n v o l v e a r e v i e w o f t h e a d m i n i s t r a t i v e c o n c l u s i o n s m a d e i n c l u d i n g w h e t h e r o r n o t t h e s t u d e n t w a s t r e a t e d f a i r l y a n d e q u i t a b l y ( s e e F i g u r e 3). T h i s h e a r i n g i s c o n d u c t e d b y i n s t i t u t i o n e m p l o y e e s w h o h a v e n o t p r e v i o u s l y b e e n i n v o l v e d i n r e v i e w s o f t h e c o m p l a i n a n t ' s e v a l u a t i o n . I / = SECONDARY FOCUS OF REVIEW I ^ Fig.. 2 . I n i t i a l Review o f D e c i s i o n F i g . 3. Second L e v e l of Review 77 I f t h e s t u d e n t c o n t i n u e s t o b e d i s s a t i s f i e d w i t h t h e o u t c o m e o f t h i s h e a r i n g , a f u r t h e r l e v e l o f a p p e a l , c a l l e d t h e I n s t i t u t i o n a l S t u d e n t A p p e a l , m a y b e p r o v i d e d ( s e e F i g u r e 4). A t t h i s a p p e a l a p a n e l w o u l d t y p i c a l l y r e v i e w t h e e v a l u a t i v e d e c i s i o n m a d e , a s s e s s i n g i t f o r p r o c e d u r a l e r r o r s o r u n f a i r t r e a t m e n t r e n d e r e d t o t h e s t u d e n t i n a r r i v i n g a t t h e j u d g m e n t . I n o t h e r w o r d s , t h i s a p p e a l w o u l d r e v i e w t h e a d m i n i s t r a t i v e d e c i s i o n - m a k i n g p r o c e s s a n d e n s u r e t h a t t h e p r o c e s s p r o v i d e d n a t u r a l j u s t i c e t o t h e s t u d e n t . T h e r e f o r e , b o t h t h e i n t e r n a l g r i e v a n c e a n d a p p e a l r e v i e w s w o u l d r e s u l t i n a r e - a p p r a i s a l o f t h e f o r m u l a t i o n o f t h e j u d g m e n t t a k i n g i n t o a c c o u n t t h e t h r e e e l e m e n t s o f t h e c o n c e p t u a l m o d e l . I f t h e s t u d e n t s t i l l f e e l s t h a t t h e j u d g m e n t h a s b e e n u n f a i r o r i n e q u i t a b l e , s h e o r h e m a y i n i t i a t e a n e x t e r n a l r e v i e w o f t h e i n s t i t u t i o n ' s d e c i s i o n - m a k i n g ( s e e F i g u r e 5). A n e x t e r n a l r e v i e w c o u l d b e u n d e r t a k e n b y t h e c o u r t s , o r . b y a p r o v i n c i a l o m b u d s m a n ( i n s i t u a t i o n s w h e r e s u c h a p o s i t i o n h a s l e g a l j u r i s d i c t i o n b y a p r o v i n c i a l A c t ) . T h e s e e x t e r n a l a d j u d i c a t o r s , a s i n t h e I n s t i t u t i o n a l S t u d e n t A p p e a l , w o u l d r e v i e w o n l y F i g . 4 . T h i r d L e v e l of Review EXTERNAL APPEAL D = PRIMARY FOCUS OF REVIEW F i g . 5. E x t e r n a l Review of D e c i s i o n * T h i s review only occurs i n p r o v i n c e s and i n s t i t u t i o n s which p r o v i d e t h e i r ombudsman w i t h such powers 80 t h e a d m i n i s t r a t i v e c o n c l u s i o n a n d / o r e x a m i n e w h e t h e r t h e r e h a d b e e n a d e n i a l o f n a t u r a l j u s t i c e t o t h e s t u d e n t . J u d g m e n t P r o c e s s T h u s , n o t o n l y d o e s t h e c o n c e p t u a l f r a m e w o r k s h o w t h e t h r e e i n t e r c o n n e c t e d e l e m e n t s o f a j u d g m e n t , i t a l s o d e p i c t s t h e f l o w o f d e c i s i o n s b e i n g m a d e . W i t h i n t h e i n s t i t u t i o n t w o l e v e l s o f d e c i s i o n - m a k i n g o c c u r . T h e f i r s t l e v e l w o u l d o c c u r i n t h e p r o g r a m u n i t ; t h e s e c o n d l e v e l w o u l d o c c u r o u t s i d e t h e d e p a r t m e n t b u t w i t h i n t h e i n s t i t u t i o n ( e . g . , a n I n s t i t u t i o n a l M a r k s R e v i e w C o m m i t t e e ) . O u t s i d e t h e i n s t i t u t i o n , a d j u d i c a t i o n o f t h e i n s t i t u t i o n ' s d e c i s i o n m a y o c c u r w i t h i n t h e C o u r t s , o r t h r o u g h a n i n v e s t i g a t i o n c o n d u c t e d b y t h e p r o v i n c i a l o m b u d s m a n ( w h e r e h e o r s h e h a s t h e j u r i s d i c t i o n ) . E a c h o f t h e s e t h r e e l e v e l s i s i n v o l v e d i n m a k i n g j u d g m e n t s a b o u t s t u d e n t c l i n i c a l p e r f o r m a n c e d e c i s i o n s . E a c h l e v e l a c t s a s a c h e c k i n g m e c h a n i s m f o r t h e p r e v i o u s l e v e l . I n t h e J u d g m e n t P r o c e s s ( s e e F i g u r e 6 ) , t h e r e a r e f i v e f l o w s d e p i c t e d . T h e f i r s t f l o w ( s e e F i g u r e 6 , # 1 ) d e s c r i b e s t h e s e q u e n c e f r o m w h e n t h e s t u d e n t p e r f o r m s 'STUDENT PERFORMS/ JUDGMENT r IS MADE GRIEVANCE REVIEW APPEAL HEARING, 1 INSTITUTIONAL! STUDENT' LAEEE^t EXTERNAL APPEAL )EPARTMENTAli REVIEW F i g . 6. Flow Model of Judgments or Reviews ^DECISION N #2 St1jDENT> K > S t U D E N t v •iKACCEPTS > T TDECISIOff I N #3 STOIJENT. fX^ACCEPTS > Y ^ D F C I S I Q N ^ #4 >TUDENTv .ACCEPTS DECISION #5 iiTUDENTsw -X^ACCEPTS >Y TENSION ^ 8 2 i n a c l i n i c a l s e t t i n g t o w h e n t h e s t u d e n t r e c e i v e s t h e e v a l u a t o r ' s j u d g m e n t a b o u t t h i s c l i n i c a l p e r f o r m a n c e . T h e n e x t t h r e e f l o w s ( s e e F i g u r e 6 , # 2 , # 3 , a n d # 4 ) p e r t a i n t o p o t e n t i a l i n s t i t u t i o n a l r e v i e w s o f t h e i n i t i a l d e c i s i o n . T h e f i n a l f l o w ( s e e F i g u r e 6 , # 5 ) d e p i c t s a n e x t e r n a l r e v i e w o f t h e e v a l u a t i v e d e c i s i o n - m a k i n g t h r o u g h t h e c o u r t s , o r t h r o u g h i n v e s t i g a t i o n s b y t h e p r o v i n c i a l o m b u d s m a n w h e n A c t s e m p o w e r h i m o r h e r t o u n d e r t a k e s u c h r e v i e w s . D u r i n g t h e f i r s t f l o w t h r o u g h t h e j u d g m e n t p r o c e s s , t h e d e c i s i o n a b o u t a s t u d e n t L s c l i n i c a l p e r f o r m a n c e w o u l d b e c o n s i d e r e d w i t h i n t h e p r o g r a m u n i t a n d w i t h i n t h - e i n s t i t u t i o n a l e v a l u a t i o n r e v i e w m e c h a n i s m . T h e p r o g r a m u n i t w o u l d e n s u r e t h a t t h e e v a l u a t i v e d e c i s i o n m a d e r e f l e c t s t h e s t u d e n t L s c l i n i c a l p e r f o r m a n c e i n r e l a t i o n t o t h e p r o g r a m ' s o b j e c t i v e s . T h e i n s t i t u t i o n a l e v a l u a t i o n r e v i e w w o u l d e n s u r e t h a t t h e e v a l u a t i v e d e c i s i o n w a s a r r i v e d a t t h r o u g h a c c e p t e d i n s t i t u t i o n a l p o l i c i e s a n d p r o c e d u r e s w h i l e , a t t h e s a m e t i m e , p r o v i d i n g t h e s t u d e n t w i t h a f a i r a n d e q u i t a b l e d e c i s i o n . 83 I n t e r - r e l a t i o n s h i p B e t w e e n t h e J u d g m e n t M o d e l C o m p o n e n t s a n d t h e L e v e l s o f R e v i e w G r i e v a n c e R e v i e w . T h i s l e v e l o f r e v i e w r e p r e s e n t s t h e f i r s t i n f o r m a l r e v i e w a n d o c c u r s g e n e r a l l y a t t h e p r o g r a m u n i t l e v e l . I t s p u r p o s e i s t o a s s e s s t h e a p p r o p r i a t e n e s s o f t h e d a t a c o l l e c t e d a b o u t t h e s t u d e n t ' s c l i n i c a l p e r f o r m a n c e , a n d h o w t h e c l i n i c a l p e r f o r m a n c e p r o b l e m s w e r e c o m m u n i c a t e d t o t h e s t u d e n t b y t h e e v a l u a t o r ( F i g u r e 2). T h a t i s , t h e G r i e v a n c e R e v i e w w o u l d r e a s s e s s t h e a c a d e m i c a s s e s s m e n t . A p p e a l H e a r i n g . T h e f i r s t f o r m a l l e v e l o f r e v i e w i s t h e A p p e a l H e a r i n g w h i c h w o u l d g e n e r a l l y o c c u r a t t h e i n s t i t u t i o n a l l e v e l a s s h o w n i n F i g u r e 3. T h i s h e a r i n g ' s i n t e n t i s n o t t o r e v i e w t h e d a t a u s e d t o f o r m u l a t e t h e p r o f e s s i o n a l j u d g m e n t m a d e b y t h e e v a l u a t o r a b o u t t h e s t u d e n t ' s c l i n i c a l p e r f o r m a n c e , b u t t o a s s e s s t h e p r o c e d u r e s u s e d i n m a k i n g t h e c o n c l u s i o n , t h e w a y i n w h i c h c l i n i c a l p e r f o r m a n c e d i f f i c u l t i e s w e r e c o m m u n i c a t e d t o t h e s t u d e n t a n d t h e f a i r n e s s a n d i m p a r t i a l i t y o f t h e c l i n i c a l e v a l u a t i v e d e c i s i o n . T h a t i s , t h e A p p e a l H e a r i n g w o u l d r e a s s e s s t h e 84 a d m i n i s t r a t i v e assessment and determine i f the s t u d e n t r e c e i v e d h i s or her due p r o c e s s . I n s t i t u t i o n a l S t u d e n t A p p e a l . I n some i n s t i t u t i o n s a f u r t h e r f o r m a l a p p e a l i s p r o v i d e d t o e i t h e r the c h i e f e x e c u t i v e o f f i c e r o f t h e i n s t i t u t i o n or a d e l e g a t e d p a n e l (see F i g u r e 4 ) . I f t h i s l e v e l o f a p p e a l was p r o v i d e d i n the i n s t i t u t i o n ' , i t would g e n e r a l l y i n v o l v e t h e c h i e f e x e c u t i v e o f f i c e r or p a n e l r e v i e w i n g o n l y the p r o c e e d i n g s from the A p p e a l H e a r i n g . T h i s r e v i e w would p r o v i d e a f i n a l i n t e r n a l r e v i e w o f the a d m i n i s t r a t i v e component o f the d e c i s i o n and assessment o f due p r o c e s s p r o v i d e d t o t h e s t u d e n t . E x t e r n a l A p p e a l . E x t e r n a l r e v i e w s (see F i g u r e 5) can be p r o v i d e d t h r o u g h e i t h e r the c o u r t s or the p r o v i n c i a l ombudsman. P r o v i n c i a l ombudsmen can o n l y c a r r y out an e x t e r n a l r e v i e w i n i n s t i t u t i o n s where t h e i r p r o v i n c i a l l e g i s l a t i o n p r o v i d e s ombudsmen w i t h such powers. T h e i r r e v i e w s a r e d i r e c t e d t o the a d m i n i s t r a t i v e component o f t h e d e c i s i o n and the f a i r n e s s and r e a s o n a b l e n e s s o f the p r o c e s s used i n a r r i v i n g a t the d e c i s i o n . I f e i t h e r the s t u d e n t or r e p r e s e n t a t i v e o f the e d u c a t i o n a l i n s t i t u t i o n were t o d i s a g r e e w i t h the 85 d e c i s i o n o f t h e p r o v i n c i a l S u p r e m e C o u r t , e i t h e r p a r t y c o u l d a p p e a l t h e d e c i s i o n t o t h e p r o v i n c i a l C o u r t o f A p p e a l , p r o v i d e d i t o b t a i n s l e a v e . A f u r t h e r a p p e a l c a n b e m a d e t o t h e S u p r e m e C o u r t o f C a n a d a , w i t h l e a v e . H o w e v e r , s u c h a n a p p e a l c a n b e m a d e o n l y o n t h e b a s i s o f a n e r r o r i n t h e a p p l i c a t i o n o f l e g a l p r i n c i p l e s b y t h e p r o v i n c i a l C o u r t o f A p p e a l . S i n c e l e g a l a p p e a l s r e v i e w o n l y t h e e v i d e n c e p r e s e n t e d a t t h e p r e c e d i n g t r i a l , j u d i c i a l o r q u a s i - j u d i c i a l t r i b u n a l s , n o n e w e v i d e n c e c a n b e e n t e r e d . I f t h e a p p e a l i s n o t a l l o w e d , t h e e v a l u a t i v e d e c i s i o n w o u l d b e u p h e l d a n d t h e s t u d e n t w o u l d h a v e n o f u r t h e r r e c o u r s e . W h e n p r o v i n c i a l o m b u d s m e n h a v e t h e a u t h o r i t y t o r e v i e w s t u d e n t s ' ' g r i e v a n c e s t h e i r d e c i s i o n s ' i m p a c t o n t h e e d u c a t i o n a l i n s t i t u t i o n s i s d e p e n d e n t o n t h e p r o v i n c i a l p o w e r s a f f o r d e d t h e s e p o s i t i o n s . D a t a G e n e r a t i o n M o d e l D e t e r m i n a t i o n o f t h e a c t u a l p r a c t i c e s i n e d u c a t i o n a l i n s t i t u t i o n s a s c o m p a r e d w i t h t h e a b o v e p r o t o t y p i c m o d e l s r e q u i r e d t h a t a s t r u c t u r e d p l a n b e d e v e l o p e d t o e n s u r e t h a t d a t a o b t a i n e d c o u l d b e a n a l y z e d f o r a " f i t " w i t h t h e m o d e l s . T o i m p l e m e n t 86 s u c h a p l a n a t h r e e - d i m e n s i o n a l m o d e l w a s r e q u i r e d ( s e e F i g u r e 7 ) . T h e f i r s t d i m e n s i o n w a s t h e J u d g m e n t M o d e l c o m p o n e n t s ( s e e F i g u r e 1 ) , t h e s e c o n d b e i n g t h e l o c a t i o n w h e r e d e c i s i o n s w e r e m a d e , a n d t h e t h i r d r e l a t i n g t o v a r i a b l e s a b o u t t h e d e c i s i o n - m a k i n g p r o c e s s . A s e t o f f i v e v a r i a b l e s w a s s e l e c t e d w h i c h p r o v i d e d a m e a n s t o a s s e s s t h e a c t u a l d e c i s i o n - m a k i n g p r o c e s s e s w h i c h o c c u r i n C a n a d i a n n u r s i n g p r o g r a m s w h e n c l i n i c a l j u d g m e n t s o f s t u d e n t s 1 p e r f o r m a n c e a r e m a d e . T h e s e v a r i a b l e s a r e : ( a ) w h e r e t h e d e c i s i o n - m a k e r i s l o c a t e d ( i . e . , i n t h e p r o g r a m u n i t , i n t h e i n s t i t u t i o n , o r i n a b o d y E x t e r n a l t o t h e i n s t i t u t i o n ) , ( b ) w h o t h e d e c i s i o n - m a k e r i s , ( c ) t h e f u n c t i o n s t h e d e c i s i o n - m a k e r p e r f o r m s , ( d ) t h e c o n t r o l s p l a c e d o n t h e d e c i s i o n - m a k e r w h e n h e o r s h e m a k e s j u d g m e n t s a b o u t s t u d e n t c l i n i c a l p e r f o r m a n c e , a n d ( e ) t h e v a r i o u s r e v i e w m e c h a n i s m s a v a i l a b l e t o s t u d e n t s w h o w i s h t o q u e s t i o n e v a l u a t i v e d e c i s i o n s a b o u t t h e i r p e r f o r m a n c e s . 87 F i g . 7. Data Generation Model 88 T h i s model p r o v i d e d a framework t o i d e n t i f y the c o n t e n t o f q u e s t i o n s w h i c h needed t o be i n c l u d e d i n the d a t a c o l l e c t i o n i n s t r u m e n t about e v a l u a t i o n and r e v i e w p r a c t i c e s . I n summary, the d e c i s i o n - m a k i n g p r a c t i c e v a r i a b l e s would g u i d e the q u e s t i o n s asked i n t h e i n s t r u m e n t a t each l e v e l o f the program's e v a l u a t i o n and r e v i e w p r o c e s s . Q u e s t i o n s would a l s o be developed t o o b t a i n d a t a r e l a t e d t o b o t h the f o c i o f t h e s e p r o c e s s e s and t o the l o c a t i o n where each l e v e l o f r e v i e w o c c u r s . T h i s i n s t r u m e n t and the s t u d y ' s methodology w i l l be d i s c u s s e d i n the next c h a p t e r . 89 C H A P T E R 4 R E S E A R C H P R O C E D U R E S T h i s c h a p t e r w i l l d e s c r i b e t h e m e t h o d u s e d t o i n v e s t i g a t e t h e r e l a t i o n s h i p s b e t w e e n t h e e l e m e n t s o f a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s , a s w e l l a s t h e i n c i d e n c e o f g r i e v a n c e s a n d a p p e a l s a n d t h e n o u t c o m e s . T h e d e s c r i p t i o n w i l l i n c l u d e d i s c u s s i o n o f t h e r e s e a r c h d e s i g n , p o p u l a t i o n f o r t h e s t u d y , d e v e l o p m e n t a n d t e s t i n g o f t h e i n s t r u m e n t s , a n d m e a s u r e s u s e d f o r b o t h d a t a c o l l e c t i o n a n d a n a l y s i s . : R e s e a r c h D e s i g n S i n c e t h i s s t u d y e x p l o r e d a n e w a r e a o f r e s e a r c h , s u f f i c i e n t d a t a h a d t o b e c o l l e c t e d t o p r o v i d e a n i n i t i a l u n d e r s t a n d i n g o f e x i s t i n g p r a c t i c e s t h r o u g h a b r o a d g e n e r a l o v e r v i e w o f a c t i v i t i e s a n d d e c i s i o n - m a k i n g p r a c t i c e s r e l a t e d t o s e l e c t e d v a r i a b l e s . D a t a c o l l e c t e d w e r e a l s o c h o s e n t o d e t e r m i n e w h e t h e r t h e t h e o r e t i c a l m o d e l s f o r t h e s t u d y 90 r e f l e c t e d a c t u a l p r a c t i c e s i n n u r s i n g e d u c a t i o n p r o g r a m s . T o m e e t t h e s e p a r a m e t e r s , a d e s c r i p t i v e s u r v e y u s i n g a c r o s s - s e c t i o n a l d e s i g n w a s c a r r i e d o u t . A n e x p l o r a t o r y s t u d y s u c h a s t h i s o n e , b y d e f i n i t i o n , a l l o w s o n l y t h e r e l a t i o n s h i p b e t w e e n e l e m e n t s t o b e d i s c o v e r e d , n o t c a u s e s o r p r e d i c t i o n o f r e s u l t s i n a n y o t h e r p o p u l a t i o n ( B o r g a n d G a u l , 1 9 8 3 ; P o l i t a n d H u n g l e r , 1 9 8 3 ) . P o p u l a t i o n T h e t a r g e t p o p u l a t i o n f o r t h i s s u r v e y w a s t h e h e a d s o f a l l t h e d i p l o m a a n d b a s i c b a c c a l a u r e a t e n u r s i n g p r o g r a m s i n C a n a d a , w i t h t h e e x c e p t i o n o f p r o g r a m s i n Q u e b e c . T h e e x c l u s i o n o f Q u e b e c p r o g r a m s w a s d u e t o t h e v a r i a t i o n i n a p p l i c a t i o n o f a d m i n i s t r a t i v e l a w p r o v i s i o n s t o Q u e b e c p u b l i c i n s t i t u t i o n s i n c o n t r a s t t o a d m i n i s t r a t i v e l a w a p p l i c a t i o n s i n t h e r e m a i n i n g p r o v i n c e s . T h e r e f o r e , t o e n s u r e a s u n i f i e d a r e s p o n d e n t g r o u p a s p o s s i b l e , Q u e b e c p r o g r a m s w e r e e x c l u d e d . T h i s s t u d y w a s a l s o l i m i t e d t o d i p l o m a a n d b a s i c b a c c a l a u r e a t e p r o g r a m s t o e n s u r e t h a t a s h o m o g e n e o u s a 9 1 g r o u p i n g a s p o s s i b l e w a s a c h i e v e d t h r o u g h o u t t h e r e m a i n i n g n i n e p r o v i n c e s . B o t h d i p l o m a a n d b a s i c b a c c a l a u r e a t e p r o g r a m s p r e p a r e n u r s e s t o m e e t t h e r e g i s t r a t i o n r e q u i r e m e n t s t h r o u g h o u t C a n a d a . Q u e s t i o n s t h e n a r o s e a s t o h o w m u c h d a t a w o u l d b e n e c e s s a r y a n d f r o m h o w m a n y i n t h i s t a r g e t e d g r o u p ? S i n c e t h e r e a p p e a r e d t o b e a r e l a t i v e l y s m a l l n u m b e r o f p r o g r a m s w h i c h w o u l d b e i n v o l v e d i n t h e s t u d y , i t w a s d e c i d e d t h a t a t o t a l p o p u l a t i o n w o u l d b e u s e d . I d e n t i f i c a t i o n o f t h e p o p u l a t i o n w a s m a d e t h r o u g h a s e a r c h o f p r o g r a m s l i s t e d i n T h e C a n a d i a n H o s p i t a l D i r e c t o r y 1 9 8 3 . F r o m t h i s s e a r c h , n i n e t y p r o g r a m s w e r e i d e n t i f i e d . I n i t i a l l y a l l n i n e t y n u r s i n g e d u c a t i o n p r o g r a m s w i t h i n t h e n i n e p r o v i n c e s i d e n t i f i e d f o r t h i s s t u d y w e r e c h o s e n . S i n c e t h e s u r v e y w a s r e s t r i c t e d t o d i p l o m a a n d b a s i c b a c c a l a u r e a t e n u r s i n g p r o g r a m s , t w o k n o w n p r o g r a m s w h i c h o n l y p r o v i d e d p o s t - b a s i c b a c c a l a u r e a t e p r o g r a m s w e r e e l i m i n a t e d f r o m t h e p o p u l a t i o n . V e r i f i c a t i o n o f t h e s t a t u s o f t h e r e m a i n i n g p r o g r a m s a n d t h e i d e n t i f i c a t i o n o f t h e n a m e s o f t h e n u r s i n g a d m i n i s t r a t o r s o f t h e s e p r o g r a m s w e r e t h e n 92 u n d e r t a k e n . T h e s o u r c e s f o r t h i s v e r i f i c a t i o n w e r e t h e p r o v i n c i a l n u r s i n g a s s o c i a t i o n s . T h e s e a s s o c i a t i o n s h a v e t h e p r o v i n c i a l l y l e g i s l a t e d a u t h o r i t y t o r e g i s t e r n u r s e s g r a d u a t i n g f r o m t h e i r r e s p e c t i v e p r o v i n c i a l n u r s i n g e d u c a t i o n p r o g r a m s , a n d h e n c e t h e y a r e f a m i l i a r w i t h p r o g r a m s w i t h i n t h e i r j u r i s d i c t i o n . T h e N u r s i n g E d u c a t i o n C o n s u l t a n t f o r e a c h o f t h e n i n e p r o v i n c i a l n u r s i n g a s s o c i a t i o n s a g r e e d i n w r i t i n g t o v e r i f y t h e i n f o r m a t i o n a b o u t t h e p r o v i n c i a l p r o g r a m s . T h e y a l s o i d e n t i f i e d f i v e a d d i t i o n a l p r o g r a m s w h i c h w e r e a d d e d t o t h e b a s e o f t h e s t u d y . T h u s , t h e t o t a l p o p u l a t i o n w a s r a i s e d t o n i n e t y - f o u r p r o g r a m s . O f t h e s e - n i n e t y - f o u r p r o g r a m s , e i g h t y - o n e p r o g r a m s r e s p o n d e d t o t h e s u r v e y o r 86. I X o f t h e t o t a l p o p u l a t i o n . T h e o t h e r t h i r t e e n p r o g r a m s d i d n o t r e s p o n d a n d h e n c e a r e n o t i n c l u d e d i n t h e s t u d y . D e v e l o p m e n t a n d T e s t i n g o f t h e I n s t r u m e n t s F o r t h e p u r p o s e s o f t h i s s t u d y , t w o i n s t r u m e n t s w e r e d e v e l o p e d : o n e t o a s s e s s a d m i n i s t r a t i v e p r a c t i c e s a n d p r o c e d u r e s r e l a t e d t o e v a l u a t i o n , g r i e v a n c e s , a n d a p p e a l s ; a n d t h e o t h e r t o a s s e s s t h e i n c i d e n c e o f c a s e s w h e r e s t u d e n t s h a d l a u n c h e d c o m p l a i n t s a b o u t t h e i r 93 c l i n i c a l e v a l u a t i v e d e c i s i o n s . T h e s e i n s t r u m e n t s w e r e d e s i g n e d t o c o l l e c t d a t a r e l e v a n t t o t w o o f t h e s u b - p r o b l e m s : O n e , E x p l o r a t i o n o f t h e a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s i n C a n a d i a n n u r s i n g p r o g r a m s w h i c h d e a l t w i t h t h e c l i n i c a l f a i l u r e o f s t u d e n t s . T w o , E x a m i n a t i o n o f t h e f r e q u e n c y o f n u r s i n g s t u d e n t a c a d e m i c g r i e v a n c e s a n d a p p e a l s w h i c h h a v e o c c u r r e d i n C a n a d a f r o m 1 9 7 8 u n t i l 1 9 8 5 . T h r e e m e t h o d s o f d a t a c o l l e c t i o n w e r e c o n s i d e r e d : p e r s o n a l i n t e r v i e w s , t e l e p h o n e i n t e r v i e w s , a n d m a i l e d q u e s t i o n n a i r e s . F o u r f a c t o r s d i c t a t e d t h e s e l e c t i o n o f t h e f i n a l c h o i c e . F i r s t , t h e r e w a s a w i d e g e o g r a p h i c d i s p e r s i o n o f r e s p o n d e n t s . S e c o n d , t h e c o s t o f u s i n g e i t h e r p e r s o n a l o r t e l e p h o n e i n t e r v i e w s w a s p r o h i b i t i v e . T h i r d , t h e r e w a s a n e e d t o c o l l e c t d a t a i n a s s t a n d a r d i z e d a f o r m a t a s p o s s i b l e t o o f f - s e t p e r c e i v e d s e m a n t i c p r o b l e m s r e s u l t i n g f r o m i n s t i t u t i o n s u s i n g a v a r i e t y o f n a m e s f o r l e v e l s o f r e v i e w s . F o u r t h , v a r y i n g p r a c t i c e s w e r e i n u s e b y r e s p o n d e n t s . A f t e r c o n s i d e r a t i o n o f t h e a b o v e f a c t o r s , i t w a s d e t e r m i n e d t h a t t h e o n l y f e a s i b l e m e t h o d w h i c h w o u l d a c c o m m o d a t e t h e s e f a c t o r s w a s a m a i l e d q u e s t i o n n a i r e . 94 F o l l o w i n g t h e d e c i s i o n t o u s e a q u e s t i o n n a i r e , c o n s i d e r a t i o n h a d t o b e m a d e a s t o t h e t y p e o f q u e s t i o n s t o b e u s e d o p e n o r c l o s e d . O p e n q u e s t i o n s w o u l d p r o v i d e r e s p o n d e n t s w i t h t h e o p p o r t u n i t y t o f u r n i s h m o r e b r e a d t h t o t h e i r r e s p o n s e s . M u l t i p l e - c h o i c e r e s p o n s e s w i t h o u t i n d i v i d u a l i z e d c o m m e n t s p o s e d a d d i t i o n a l p r o b l e m s . R e s p o n d e n t s f o r p r o g r a m s w h o s e p r a c t i c e s v a r i e d s i g n i f i c a n t l y f r o m t h e o p t i o n s m e n t i o n e d i n t h e r e s p o n s e s p r o v i d e d c o u l d n o t r e s p o n d . T h e r e f o r e , i t w a s d e c i d e d t h a t t h e q u e s t i o n s w o u l d b e c l o s e d b u t w o u l d p r o v i d e a n o p t i o n f o r r e s p o n d e n t s t o e x p a n d o n t h e i r p r o g r a m s ' p r a c t i c e s w h e n t h e y v a r i e d f r o m t h e o p t i o n s p r o v i d e d . I n s t r u m e n t t o a s s e s s a d m i n i s t r a t i v e p r a c t i c e s a n d p r o c e d u r e s . Q u e s t i o n s t o o b t a i n t h e n e e d e d d a t a w e r e s t r u c t u r e d t o s e e k i n f o r m a t i o n c o n c e r n i n g t h e v a r i o u s l e v e l s o f r e v i e w s o f d e c i s i o n - m a k i n g a s w e l l a s t h e s t r u c t u r e a n d p r o c e s s e s u t i l i z e d . T h e s e q u e s t i o n s w e r e o r g a n i z e d a r o u n d t h e d i m e n s i o n s o f t h e D a t a G e n e r a t i o n M o d e l d i s c u s s e d i n t h e p r e v i o u s c h a p t e r . T h e s e i n c l u d e d : w h e r e t h e d e c i s i o n - m a k e r w a s l o c a t e d , w h o t h e d e c i s i o n - m a k e r w a s , w h a t f u n c t i o n s t h e d e c i s i o n - m a k e r p e r f o r m e d , who c o n t r o l l e d the d e c i s i o n - m a k e r , and what r o u t e s t u d e n t s used i f they w i s h e d t o q u e s t i o n the d e c i s i o n . Such decisions-making p r o c e s s e s p o t e n t i a l l y o c c u r r e d a t four l e v e l s w i t h i n any i n s t i t u t i o n . T h i s a s s e r t i o n r e f l e c t e d b o t h i n f o r m a t i o n g a i n e d from the l i t e r a t u r e s e a r c h f o r t h i s study and from the r e s e a r c h e r ' s p e r s o n a l e x p e r i e n c e . Thus, the q u e s t i o n n a i r e was d e s i g n e d t o c o l l e c t d a t a r e l a t e d t o t h e f o l l o w i n g : (a) c l i n i c a l e v a l u a t i o n p r a c t i c e s i n the program, (b) i n f o r m a l r e v i e w o f the e v a l u a t i v e d e c i s i o n s w i t h i n the program, (c) f o r m a l r e v i e w o f the e v a l u a t i v e d e c i s i o n s w i t h i n the i n s t i t u t i o n , and (d) a d j u d i c a t i o n o f the f o r m a l d e c i s i o n by the c h i e f e x e c u t i v e o f f - i c e r o f the i n s t i t u t i o n . Because i n s t i t u t i o n s u t i l i z e d a v a r i e t y o f names f o r t h e i r l e v e l s o f r e v i e w s the naming or l a b e l l i n g o f t h e f o u r l e v e l s proved p r o b l e m a t i c . I n i t i a l l y , a g e n e r i c t e r m - l a b e l l i n g ( e g . , g r i e v a n c e , a p p e a l , e t c . ) was used. However, a f t e r the p r e - t e s t i n g o f t h i s i n s t r u m e n t i t was determined t h a t l a b e l s d e s c r i b i n g the p r o c e s s s h o u l d be used. T h e r e f o r e , the f i r s t l e v e l was c a l l e d "Assessment o f S t u d e n t s ' C l i n i c a l P e r f o r m a n c e , " 96 t h e s e c o n d , " I n f o r m a l G r i e v a n c e R eview o f S t u d e n t C l i n i c a l P e r f o r m a n c e D e c i s i o n s , " t h e t h i r d , " F o r m a l A p p e a l H e a r i n g o f S t u d e n t C l i n i c a l P e r f o r m a n c e D e c i s i o n s , " and t h e f o u r t h , " I n s t i t u t i o n a l S t u d e n t A p p e a l . " Two s o u r c e s were u s e d t o s p e c i f y q u e s t i o n c o n t e n t (a) t h e D a t a G e n e r a t i o n M o d e l , and (b) s e l e c t e d v a r i a b l e s f r o m G o l d e n ' s (1981) s t u d y o f h i g h e r e d u c a t i o n i n s t i t u t i o n s ' s t u d e n t h a n d b o o k s . The D a t a G e n e r a t i o n M o d e l s p e c i f i e d t h e d a t a n e c e s s a r y f o r t h e p r o v i s i o n o f i n f o r m a t i o n w h i c h d e s c r i b e d t h e d e c i s i o n - m a k i n g p r a c t i c e s i n i n s t i t u t i o n s and p r o g r a m s , w h i l e G o l d e n ' s s t u d y p r o v i d e d v a r i a b l e s p e r t a i n i n g t o t h e s t r u c t u r e o f g r i e v a n c e and a p p e a l s y s t e m s w h i c h were i n p l a c e i n a number o f h i g h e r e d u c a t i o n i n s t i t u t i o n s i n t h e U n i t e d S t a t e s . V a r i a b l e f r o m G o l d e n ' s s t u d y w h i c h were i n c o r p o r a t e d i n t o t h e q u e s t i o n n a i r e i n c l u d e d : (a) who was i n t e r v i e w e d , (b) who a c t e d as a d v i s o r s t o s t u d e n t s and f a c u l t y , ( c ) how r e v i e w s were documented, (d) w hether w i t n e s s e s were c a l l e d d u r i n g r e v i e w s t o p r o v i d e e v i d e n c e , (e) who d e t e r m i n e d w h i c h w i t n e s s e s c o u l d be c a l l e d , and ( f ) what e v i d e n c e was p e r m i t t e d d u r i n g a r e v i e w . 97 I n o r d e r t o dete r m i n e the r e l a t i o n s h i p s between the elements o f a d m i n i s t r a t i v e s t r u c t u r e s and p r o c e d u r e s , i t was r e c o g n i z e d t h a t some demographic i n f o r m a t i o n would a l s o be r e q u i r e d . S i x demographic v a r i a b l e s were i d e n t i f i e d : (a) g e o g r a p h i c l o c a t i o n o f i n s t i t u t i o n s , (b) type o f i n s t i t u t i o n w i t h i n w h i c h the program o p e r a t e d , (c) t o t a l s t u d e n t e n r o l l m e n t o f the i n s t i t u t i o n , (d) type o f n u r s i n g program, (e) number o f s t u d e n t s e n r o l l e d i n the program, and ( f ) the average age o f n u r s i n g s t u d e n t s c u r r e n t l y i n the program. Each o f the above v a r i a b l e s was f o r m u l a t e d i n t o a q u e s t i o n w i t h o p t i o n s w h i c h c o u l d be r e a d i l y checked by the r e s p o n d e n t s . A l t h o u g h t h i s s e c t i o n i n c r e a s e d the o v e r a l l l e n g t h o f the q u e s t i o n n a i r e , i t was f e l t t o be i m p o r t a n t i n f o r m a t i o n i n orde r t o a s s e s s two a r e a s . F i r s t , i t was n e c e s s a r y t o p r o v i d e a means o f a n a l y z i n g cases o f g r i e v a n c e s and a p p e a l s w h i c h were o b t a i n e d t h r o u g h t h e use o f the second i n s t r u m e n t and second, t o deter m i n e whether v a r i a t i o n s i n a d m i n i s t r a t i v e p r a c t i c e s were due t o the g e o g r a p h i c l o c a t i o n o f the program, t h e type o f i n s t i t u t i o n the program was s i t u a t e d i n , the s i z e o f the i n s t i t u t i o n , the s i z e o f the n u r s i n g program, the average age o f s t u d e n t s i n the 98 n u r s i n g p rogram, or a c o m b i n a t i o n o f any o f t h e s e v a r i a b l e s . Mason (1983) r e p o r t s , t h a t a q u e s t i o n n a i r e s h o u l d n o t be any l o n g e r t h a n e l e v e n pages or 125 q u e s t i o n s . The p r o p o s e d i n s t r u m e n t p r o v e d t o be l o n g e r t h a n t h i s e l e v e n page " r u l e . " T h e r e f o r e , t o p r e v e n t " b u r n o u t " o f t h e r e s p o n d e n t s , t h e q u e s t i o n n a i r e was s t r u c t u r e d so t h a t r e s p o n d e n t s c o u l d s k i p q u e s t i o n s a nd/or s e c t i o n s i n t h e e v e n t t h a t t h e c o n t e n t d i d n o t a p p l y t o t h e i r p r o g r a m s ' p r a c t i c e s . B e r d i e and A n d e r s o n ' s book on q u e s t i o n n a i r e s s u g g e s t e d a number o f c o n s i d e r a t i o n s d e s i g n e d t o e n h a n c e t h e c h a n c e o f q u e s t i o n n a i r e c o m p l e t i o n by r e s p o n d e n t s . T h e s e i n c l u d e d : 1. P r i n t i n g and P a p e r -* a r t f u l r e p r o d u c t i o n on h i g h q u a l i t y p a p e r . 2. C o l o r s T - C o l o r e d p a p e r s and i n k s add l i t t l e c o s t t o a s t u d y and f o r c e r t a i n t y p e s o f samples w i l l p r o b a b l y i n c r e a s e t h e a p p e a l o f t h e q u e s t i o n n a i r e . (1974:56) 99 A 2 0 l b . l i g h t t a n l e t t e r q u a l i t y p a p e r w a s s e l e c t e d . T y p i n g o f t h e q u e s t i o n s a n d o p t i o n s w a s c o m p l e t e d i n L e t t e r G o t h i c 1 2 t y p e w i t h i n s t r u c t i o n s t y p e d i n C o u r i e r I t a l i c 1 2 . T h e f o r m e r t y p i n g w a s d u p l i c a t e d i n b r o w n a n d t h e l a t t e r i n g r e e n . T h e p a g e s w e r e t h e n s t a p l e d t o g e t h e r t o f o r m a b o o k l e t . P l e a s e r e f e r t o A p p e n d i x A t o r e v i e w a c o p y o f t h i s i n s t r u m e n t . I n s t r u m e n t t o c o l l e c t d a t a r e l a t e d t o f r e q u e n c y o f s t u d e n t c o m p l a i n t s . T h e s e c o n d i n s t r u m e n t w a s n e c e s s a r y t o a n a l y z e s p e c i f i c c a s e s w i t h i n t h e i n s t i t u t i o n s a n d t o d e t e r m i n e h o w p r o c e d u r e s a n d o u t c o m e s v a r i e d b e t w e e n t y p e s o f i n s t i t u t i o n s g e o g r a p h i c a l l y a n d i n s t i t u t i o n a l l y . T h i s i n s t r u m e n t w a s s e n t t o t h e s a m e r e s p o n d e n t s a s w a s t h e f i r s t i n s t r u m e n t . S p e c i f i c v a r i a b l e s t h a t t h e s e c o n d i n s t r u m e n t w a s d e s i g n e d t o a s s e s s w e r e : ( a ) t h e n u m b e r o f l e v e l s o f r e v i e w a n i n d i v i d u a l s t u d e n t u s e d w i t h i n t h e i n s t i t u t i o n , ( b ) t h e o u t c o m e o f e a c h l e v e l o f r e v i e w ( i . e . , w h e t h e r o r n o t t h e o r i g i n a l d e c i s i o n w a s u p h e l d ) , ( c ) w h e t h e r o r n o t t h e s t u d e n t l a u n c h e d a n e x t e r n a l a p p e a l , ( d ) w h a t a g e n c y w a s i n v o l v e d i n t h e e x t e r n a l a p p e a l , ( e ) t h e o u t c o m e o f a n e x t e r n a l 100 a p p e a l , a n d ( f ) t h e i m p a c t o f s u c h a n o u t c o m e o n t h e i n s t i t u t i o n . I t w a s r e c o g n i z e d t h a t p r o v i d i n g t h e a b o v e i n f o r m a t i o n w o u l d b e t i m e - c o n s u m i n g f o r t h e r e s p o n d e n t s . T h e r e f o r e , t h e f o r m a t f o r t h e i n s t r u m e n t " u s e d b o t h t a b l e s a n d s i m p l e b o x e s f o r c h e c k i n g t h e m o s t a p p r o p r i a t e r e s p o n s e s f o r e a c h c a s e . R e s p o n d e n t s w e r e r e q u e s t e d t o c o m p l e t e o n e i n s t r u m e n t f o r e a c h c a s e i n w h i c h a s t u d e n t l a u n c h e d a c o m p l a i n t a g a i n s t h i s o r h e r e v a l u a t i v e d e c i s i o n . A s i n t h e f i r s t i n s t r u m e n t , r e s p o n d e n t s w e r e g i v e n i n s t r u c t i o n s t o s k i p s e c t i o n s o f t h e s e c o n d i n s t r u m e n t i n a r e a s w h e r e t h e i n f o r m a t i o n r e q u e s t e d d i d n o t a p p l y t o t h e i n d i v i d u a l c a s e . A s e c o n d a r y c o n c e r n w a s t h e n e e d f o r i n s t i t u t i o n s t o m a i n t a i n t h e c o n f i d e n t i a l i t y o f i n f o r m a t i o n a b o u t t h e i r s t u d e n t s . A c c o r d i n g l y , r e s p o n d e n t s w e r e r e q u e s t e d t o n u m b e r e a c h c a s e r e p o r t e d a n d i d e n t i f y t h e y e a r i n w h i c h t h e c o m p l a i n t o c c u r r e d ; ( r e f e r t o A p p e n d i x B f o r a s a m p l e o f t h i s i n s t r u m e n t ) . S o m e r e s p o n d e n t s , h o w e v e r , r e p o r t e d t h a t t h e a b o v e r e q u e s t f o r i n f o r m a t i o n w a s t o o t i m e - c o n s u m i n g a n d d i d n o t p r o v i d e a n y c a s e s ; o t h e r r e s p o n d e n t s r e p o r t e d a l i m i t e d 101 n u m b e r o f c a s e s , i n d i c a t i n g t h a t t h e s e w e r e a s a m p l i n g o f t h e t y p e s o f c a s e s t h e i r p r o g r a m s h a d e x p e r i e n c e d ; s t i l l o t h e r s p r o v i d e d c o m p l e t e d i n s t r u m e n t s f o r a l l t h e c a s e s t h e i r p r o g r a m s h a d b e e n i n v o l v e d w i t h . A t o t a l o f 2 0 5 c a s e s w a s r e p o r t e d b y i n s t i t u t i o n s . T h i s n u m b e r , h o w e v e r , d o e s n o t r e p r e s e n t a t o t a l p o p u l a t i o n o f c a s e s f r o m t h e a c c e s s i b l e p o p u l a t i o n . I t , t h e r e f o r e , r e p r e s e n t s a h a p h a z a r d s a m p l e o f c a s e s a n d c o n c l u s i o n s b a s e d o n t h e s e c a s e s m u s t b e s u i t a b l y c a u t i o u s . P r e - t e s t i n g o f t h e i n s t r u m e n t s . . F o l l o w i n g t h e d e v e l o p m e n t o f t h e t w o i n s t r u m e n t s , t h e y w e r e p r e - t e s t e d b y a g r o u p o f t e n n u r s e e d u c a t o r s . T h e s e e d u c a t o r s r e p r e s e n t e d n u r s i n g p r o g r a m s i n u n i v e r s i t y , c o l l e g e , a n d i n s t i t u t e o f t e c h n o l o g y p r o g r a m s w h i c h w o u l d n o t b e r e s p o n d e n t s t o t h e s t u d y b e c a u s e t h e y w e r e e i t h e r f a c u l t y i n n o n - b a s i c b a c c a l a u r e a t e n u r s i n g p r o g r a m s , o r w e r e n o t h e a d s o f d i p l o m a p r o g r a m s . T w o o f t h i s s a m p l e w e r e c u r r e n t l y , o r h a d b e e n , a d m i n i s t r a t i v e h e a d s o f n u r s i n g e d u c a t i o n p r o g r a m s , w h i l e t h e o t h e r e i g h t h a d p r e v i o u s e x p e r i e n c e i n a p p e a l a n d g r i e v a n c e h e a r i n g s f o r s t u d e n t s . P r i o r t o t h e p r e - t e s t , e a c h 102 p o t e n t i a l p a r t i c i p a n t w a s a s k e d i f s h e w o u l d b e w i l l i n g t o a s s i s t i n t h i s p h a s e o f t h e s t u d y . A l l t e n i n d i v i d u a l s i n d i c a t e d s u c h w i l l i n g n e s s . R e s p o n d e n t s t o t h i s p r e - t e s t i n g w e r e p r o v i d e d w i t h a p a c k e t c o n t a i n i n g a c o v e r l e t t e r , c o p i e s o f t h e t w o i n s t r u m e n t s , a n d a c r i t i q u e f o r m . T h e y w e r e r e q u e s t e d t o c o m p l e t e t h e i n s t r u m e n t s a n d t h e n t o e v a l u a t e t h e m b y p r o v i d i n g s p e c i f i c c o m m e n t s r e g a r d i n g t h e f o l l o w i n g a r e a s : ( a ) o v e r a l l f o r m a t o f t h e i n s t r u m e n t s , ( b ) l e n g t h o f t h e i n s t r u m e n t s , ( c ) t h e a m o u n t o f t i m e r e q u i r e d t o c o m p l e t e e a c h i n s t r u m e n t , ( d ) t e r m i n o l o g y u s e d i n b o t h , ( e ) i n s t r u c t i o n s f o r t h e i r c o m p l e t i o n , a n d ( f ) t h e a : p p r o p r i a t e n e s s o f t h e s p e c i f i c c o n t e n t o f q u e s t i o n s . T h e r e w a s a 50% r e t u r n r a t e f o r t h e p r e - t e s t . I n f o r m a t i o n p r o v i d e d l e d t o a m a j o r r e s t r u c t u r i n g o f t h e f i r s t i n s t r u m e n t ' s l e v e l s o f r e v i e w . T h i s r e v i s i o n w a s d i s c u s s e d e a r l i e r i n t h e i n s t r u m e n t d e v e l o p m e n t s e c t i o n o f t h i s c h a p t e r . G e n e r a l l y , t h e r e s p o n d e n t s f e l t t h a t t h e l e n g t h o f t h e i n s t r u m e n t s w a s a p p r o p r i a t e a n d d i d n o t f e e l t h a t t h e s e c o n d i n s t r u m e n t w o u l d p o s e a n y c o n f i d e n t i a l i t y p r o b l e m s . 1 0 3 T h e a b o v e i n f o r m a t i o n w a s i n c o r p o r a t e d i n t o t h e f i n a l r e v i s i o n o f t h e i n s t r u m e n t s . O n c e t h i s r e v i s i o n w a s c o m p l e t e d , t h e i m p l e m e n t a t i o n o f t h e d a t a c o l l e c t i o n p h a s e w a s n e x t o n t h e a g e n d a . M e a s u r e s f o r D a t a C o l l e c t i o n P r i o r t o i m p l e m e n t i n g t h e d a t a c o l l e c t i o n p h a s e , p a c k e t s t o b e m a i l e d o u t t o t h e p o t e n t i a l r e s p o n d e n t s h a d t o b e a s s e m b l e d . T h i s n e x t s e c t i o n w i l l d e s c r i b e t h e d e v e l o p m e n t o f a n d d e c i s i o n - m a k i n g a b o u t t h e c o n t e n t o f t h e p a c k e t s a n d t h e p r o c e d u r e s f o r t h e m a i l - o u t a n d f o l l o w - u p . C o v e r l e t t e r . - O r l i c h ' s ( 1 9 7 8 ) g u i d e l i n e s w e r e u s e d f o r t h e p r e p a r a t i o n o f t h e c o v e r l e t t e r . A l t h o u g h t h e r e w a s n o t a s p e c i f i c s p o n s o r f o r t h i s s t u d y , l e t t e r h e a d p a p e r f r o m t h e U n i v e r s i t y o f B r i t i s h C o l u m b i a ' s D e p a r t m e n t o f A d m i n i s t r a t i v e , A d u l t , a n d H i g h e r E d u c a t i o n w a s u s e d f o r t h e c o v e r l e t t e r t o p r o v i d e s u p p o r t o f t h e s t u d y L s a u t h e n t i c i t y . S e e A p p e n d i x C f o r a c o p y o f t h i s l e t t e r . A F r e n c h t r a n s l a t i o n o f t h e l e t t e r w a s a l s o p r o v i d e d b e c a u s e t h r e e o f t h e f i v e n u r s i n g p r o g r a m s i n N e w B r u n s w i c k a r e p r o v i d e d i n F r e n c h . A t t h e e n d o f t h i s l e t t e r a n a p o l o g y w a s g i v e n 104 f o r t h e f a i l u r e t o b e a b l e t o p r o v i d e i n s t r u m e n t s i n F r e n c h a s w e l l . T h e o u t c o m e o f t h i s e f f o r t w a s a 100% r e s p o n s e r a t e f r o m t h e s e F r e n c h p r o g r a m s . T h e l i t e r a t u r e a l s o s t r e s s e d t h e n e e d t o p e r s o n a l i z e t h e s u r v e y s . A g i f t o f a l a p e l p i n w i t h t h e l o g o f o r t h e R e g i s t e r e d N u r s e s ' - A s s o c i a t i o n o f B . C . w a s e n c l o s e d t o " t h a n k " p a r t i c i p a n t s f o r t h e t i m e t a k e n t o c o m p l e t e t h e i n s t r u m e n t s . T h e c o v e r l e t t e r a n d i n s t r u m e n t s w e r e p l a c e d i n l a r g e w h i t e m a n i l a e n v e l o p e s o n w h i c h t h e p r o g r a m h e a d s ' n a m e s , t i t l e s , a n d a d d r e s s e s w e r e d i r e c t l y t y p e d . C o l o u r e d p o s t a g e s t a m p s w e r e s e p a r a t e l y a p p l i e d t o t h e e n v e l o p e s . S e l f - a d d r e s s e d , s t a m p e d r e t u r n e n v e l o p e s w e r e a l s o * i n c l u d e d . E v e r y e f f o r t w a s m a d e t o i m p r e s s r e c i p i e n t s a n d , h e n c e , i n c r e a s e t h e r e s p o n s e r a t e . M a i l - o u t a n d f o l l o w - u p . A t e n t a t i v e s c h e d u l e f o r i m p l e m e n t a t i o n o f t h e d a t a c o l l e c t i o n p h a s e o f t h e s t u d y w a s p r e p a r e d . C r u c i a l t o t h i s p l a n w a s t h e d a t e o f t h e i n i t i a l m a i l - o u t . I t w a s r e a l i z e d t h a t p r o g r a m s w o u l d h a v e t o r e c e i v e t h e i n s t r u m e n t s p r i o r t o M a y t o e n s u r e t h a t t h e d a t a c o l l e c t i o n p h a s e w a s c o n c l u d e d p r i o r t o t h e e n d o f t h e a c a d e m i c t e r m s o f m o s t 105 i n s t i t u t i o n s . F o u r f o l l o w - u p s were p l a n n e d , e a c h o c c u r r i n g t h r e e weeks a f t e r t h e p r e v i o u s m a i l i n g . The f i r s t and t h i r d f o l l o w - u p w o u l d be i n t h e f o r m o f a c o l o u r e d p o s t c a r d w h i l e t h e s e c o n d w o u l d p r o v i d e a n o t h e r c o v e r l e t t e r and s e t o f i n s t r u m e n t s . The i n i t i a l m a i l ^ o u t o f t h e p a c k e t s o c c u r r e d on A p r i l 2 6 t h , 1985. As shown i n T a b l e 1, twenty r e s p o n d e n t s r e t u r n e d t h e i r c o m p l e t e d i n s t r u m e n t s p r i o r t o r e c e i p t o f t h e f i r s t f o l l o w i f u p . A f u r t h e r t h i r t y * t h r e e r e s p o n d e n t s c o m p l e t e d and r e t u r n e d t h e i r i n s t r u m e n t s p r i o r t o t h e s e c o n d f o l l o w - u p w h i l e s e v e n t e e n c o m p l e t e d i n s t r u m e n t s were r e c e i v e d p r i o r t o t h e t h i r d and f i n a l f o l l o w - u p . T a b l e l . s - R e s p o n d e n t R e t u r n s B a s e d on Use o f F o l l o w <rups ACTION INSTRUMENTS % OF 1 OF SENT RETURNED RETURNED TOTAL SENT I n i t i a l M a i l - o u t 94 20 21.3 21 .3 1 s t F o l l o w - u p 74 33 35.1 44 .6 2nd F o l l o w - u p 41 17 18.0 41 .5 3 r d F o l l o w u p 24 11 11.7 45 .8 TOTAL 81 86.2% 106 T h e f o u r t h f o l l o w - u p y i e l d e d a n o t h e r e l e v e n c o m p l e t e d i n s t r u m e n t s . T w o a d d i t i o n a l i n s t r u m e n t s w e r e r e t u r n e d w i t h o u t d a t a . T h u s t h e u s e o f t h r e e f o l l o w - u p s p r o v i d e d a t o t a l r e s p o n s e r a t e o f 8 6 . 2 % . M e t h o d s f o r D a t a A n a l y s i s , D e s c r i p t i o n o f t h e m e t h o d s u s e d t o a n a l y z e t h e d a t a w i l l b e d i s c u s s e d s e p a r a t e l y u n d e r m e a s u r e s u s e d f o r e a c h i n s t r u m e n t . A n a l y s i s o f d a t a r e l a t e d t o a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s . P r i o r t o t h e r e c e i p t o f t h e f i r s t c o m p l e t e d i n s t r u m e n t s , a d a t a c o l l e c t i o n t o o l w a s d e s i g n e d . T h i s t o o l w a s i n t e n d e d t o a c t a s a g u i d e d u r i n g t h e c o d i n g o f d a t a o n t h e r e t u r n e d i n s t r u m e n t s ( r e f e r t o A p p e n d i x D f o r a c o p y ) . D a t a w e r e c o d e d , t h e n e n t e r e d o n F o r t r a n s h e e t s a n d v e r i f i e d f o r a c c u r a c y . F r e q u e n c i e s a n d p e r c e n t a g e s o f r e s p o n s e s f o r e a c h q u e s t i o n w e r e t h e n c a l c u l a t e d . A n y a d d i t i o n a l c o m m e n t s m a d e b y r e s p o n d e n t s w e r e t r a n s f e r r e d i n t o a s e p a r a t e c o m p u t e r f i l e a n d g r o u p e d a c c o r d i n g t o t h e q u e s t i o n n u m b e r . C o m m e n t s w e r e t h e n r e v i e w e d d u r i n g t h e 107 a n a l y s i s o f q u e s t i o n s . The q u e s t i o n s were th e n c l u s t e r e d around the v a r i a b l e s i d e n t i f i e d i n the Data G e n e r a t i o n Model (see F i g u r e 7, 87 ) . T h i s was i n i t i a l l y c a r r i e d out by the r e s e a r c h e r but was checked by a n e u t r a l nurse e d u c a t o r , who had not had any p r e v i o u s i n v o l v e m e n t w i t h the st u d y . A summary o f the outcomes o f t h i s c l u s t e r i n g p r o c e s s i s r e p o r t e d i n T a b l e 2 below. T a b l e 2 .** C l u s t e r i n g o f Q u e s t i o n s Around Data G e n e r a t i o n Model V a r i a b l e s VARIABLE LEVEL QUESTION RESEARCHER NUMBERS NURSE EDUCATOR L o c a t i o n o f I 8,9 8,1 ,3 D e c i s i o n * I I 22 22 maker I I I 39 50 IV 65 65 D e c i s i o n * I 8,9,10 9,1 0,16 maker I I 22 19 I I I 39 39 IV 65 59, 60 F u n c t i o n s o f I 11,15 11,12,15 D e c i s i o n * I I 21 ,23,24,25 23,24,25,32 maker 26 ,27,28,29 33,34 30 ,31,32 I I I 38140^41,42 3 7 , 3 8 , 4 0 , 4 1 , 43 ,44 ,45 ,46 42 ,51 ,52 ,53 47 ,48 ,49 ,50 51,56,57 IV 64 ,66 ,67 ,72 64 ,67 ,68 ,69 , ... 73 70 108 T a b l e 2 . - - C l u s t e r i n g o f Q u e s t i o n s A r o u n d D a t a G e n e r a t i o n M o d e l V a r i a b l e s c o n t i n u e d V A R I A B L E L E V E L Q U E S T I O N N U M B E R S R E S E A R C H E R N U R S E E D U C A T O R C o n t r o l s o n I 1 6 7 , 1 4 , 1 8 D e c i s i o n - I I 3 3 , 3 4 2 0 , 2 1 , 2 8 , 2 9 m a k e r 3 1 1 1 1 5 2 , 5 3 , 5 4 , 5 5 3 6 , 4 5 , 4 6 , 4 7 , 4 8 , 4 9 , 5 5 , 5 6 , 5 7 I V 6 3 , 6 8 , 6 9 , 7 0 , 7 1 6 3 , 6 6 , 7 2 , 7 3 S t u d e n t R o u t e I 1 7 , 1 8 , 1 9 1 7 t o Q u e s t i o n 11 3 5 , 3 6 2 6 , 2 7 , 3 0 , 3 5 I 1 1 5 8 , 6 2 4 3 , 4 4 , 5 4 , 5 8 I V 0 6 1 , 6 2 , 7 1 W h e r e v e r v a r i a t i o n s o c c u r r e d b e t w e e n t h e t w o a s s e s s o r s , a c a r e f u l r e v i e w w a s u n d e r t a k e n t o d e c i d e w h e t h e r p r e s e n t p l a c e m e n t o f t h e q u e s t i o n w a s a p p r o p r i a t e o r w h e t h e r i t s h o u l d b e m o v e d . T h e a n a l y s i s o f d a t a w i t h i n t h e c l u s t e r s w i l l b e d i s c u s s e d i n t h e n e x t c h a p t e r . N u r s i n g p r o g r a m r e s p o n d e n t s w e r e a l s o r e q u e s t e d t o p r o v i d e c o p i e s o f a n y w r i t t e n p r o g r a m o r i n s t i t u t i o n a l p o l i c i e s a n d p r o c e d u r e s p e r t a i n i n g t o t h e s t u d y t o p i c . F i f t y - s e v e n o f t h e e i g h t y - o n e r e s p o n d e n t s t o t h i s s u r v e y p r o v i d e d s u c h d o c u m e n t s . T h e p o l i c i e s a n d 109 p r o c e d u r e s d o c u m e n t f o r e a c h p r o g r a m w a s r e v i e w e d b y t h e r e s e a r c h e r w h o t h e n i n d e p e n d e n t l y c o m p l e t e d a c o p y o f t h e s t u d y L s i n s t r u m e n t f o r t h a t p r o g r a m . T h e r e s e a r c h e r s e l e c t e d o p t i o n s o n l y w h e r e t h e p o i n t w a s s p e c i f i c a l l y c o v e r e d i n t h e p r o v i d e d d o c u m e n t s . R e s p o n s e s w e r e c o d e d a c c o r d i n g t o t h e s a m e p r o c e s s a s c a r r i e d o u t f o r t h e r e s p o n d e n t s ' c o m p l e t i o n o f t h e i n s t r u m e n t s w i t h t h e e x c e p t i o n o f t h e s e c o n d r e l i a b i l i t y c h e c k o f d a t a . T h e t w o s e t s o f d a t a f o r e a c h o f t h e f i f t y - s e v e n p r o g r a m s w e r e t h e n e n t e r e d o n t o s e p a r a t e F o r t r a n s h e e t s w i t h t h e r e s p o n d e n t ' s d a t a p l a c e d a b o v e t h e r e s e a r c h e r ' s d a t a . T h e l e v e l s o f a g r e e m e n t b e t w e e n e a c h o p t i o n f o r e v e r y q u e s t i o n w e r e c o m p a r e d u s i n g C o n t i n g e n c y T a b l e s o f F r e q u e n c i e s . A n a l y s i s o f t h i s a s s e s s m e n t w i l l b e d i s c u s s e d i n t h e n e x t c h a p t e r . A n a l y s i s o f d a t a r e l a t e d t o f r e q u e n c y o f s t u d e n t c o m p l a i n t s . D a t a f o r t h e s e c o n d i n s t r u m e n t w e r e a n a l y z e d u s i n g a s i m i l a r p r o c e s s d e s c r i b e d f o r t h e f i r s t i n s t r u m e n t ( s e e A p p e n d i x E f o r a c o p y o f D a t a C o l l e c t i o n T o o l - 2 ) . A l l c a s e s w e r e t h e n g r o u p e d i n t o t h e i r r e s p e c t i v e p r o v i n c e s a n d t h e n b y t y p e o f i n s t i t u t i o n - - h o s p i t a l , " c o l l e g e , i n s t i t u t e o f 1 1 0 t e c h n o l o g y , u n i v e r s i t y , o r o t h e r . T h e c a s e s w e r e t h e n b r o k e n d o w n b y y e a r o f o c c u r r e n c e t o f a c i l i t a t e a c a l c u l a t i o n o f t h e r a t e o f c a s e s b y p r o v i n c e a n d b y t y p e o f i n s t i t u t i o n . I n o r d e r t o c a l c u l a t e t h e r a t e o f c a s e s b y s t u d e n t e n r o l l m e n t i n p r o g r a m s , t h e a c t u a l e n r o l l m e n t s f o r e a c h t y p e o f i n s t i t u t i o n b y p r o v i n c e w e r e n e e d e d . T h i s v a l u e w a s o b t a i n e d f r o m q u e s t i o n n a i r e r e s p o n s e s t o t h e q u e s t i o n , " W h a t i s t h e a p p r o x i m a t e s t u d e n t e n r o l l m e n t i n e a c h o f y o u r n u r s i n g p r o g r a m s ? " T h e r e s p o n s e p r o v i d e d t h e e n r o l l m e n t o f s t u d e n t s i n d i p l o m a a n d b a s i c b a c c a l a u r e a t e p r o g r a m s f o r 1 9 8 5 . A n a s s u m p t i o n w a s m a d e , b a s e d o n a n i n q u i r y t o i n f o r m e d s o u r c e s , t h a t t h e n u m b e r o f s e a t s i n n u r s i n g p r o g r a m s b e t w e e n 1 9 7 8 a n d 1 9 8 5 w a s a r e l a t i v e c o n s t a n t . T h e r e f o r e , t h e n u m b e r o f s t u d e n t s r e p o r t e d f o r 1 9 8 5 w a s t h e n m u l t i p l i e d b y e i g h t t o g i v e a n a p p r o x i m a t e t o t a l o f s t u d e n t e n r o l l m e n t o v e r t h e p e r i o d . F i n a l l y , t h e c a l c u l a t i o n o f t h e r a t e o f c a s e s p e r 1 0 0 s t u d e n t e n r o l l m e n t s b y p r o v i n c e a n d b y t y p e o f i n s t i t u t i o n w a s c a r r i e d o u t . T h i s a n a l y s i s w i l l b e r e p o r t e d i n t h e n-e-x-t c h a p t e r /5>o <C i\ I l l Coded d a t a r e f l e c t i n g i n f o r m a t i o n p e r t a i n i n g t o the l e v e l s o f r e v i e w s , b o t h i n t e r n a l and e x t e r n a l t o the i n s t i t u t i o n , were then a n a l y z e d a c c o r d i n g t o t h e i r f r e q u e n c i e s , and then a c c o r d i n g t o t h e i r outcome a t each l e v e l , b o t h by p r o v i n c e and by type o f i n s t i t u t i o n . A n a l y s i s o f t h e s e d a t a w i l l a l s o be r e p o r t e d i n t h e next c h a p t e r . 112 C H A P T E R 5 R E S U L T S : D E M O G R A P H I C S , , A D M I N I S T R A T I V E S T R U C T U R E S A N D P R O C E D U R E S T h e p u r p o s e o f t h i s s t u d y w a s t o d e t e r m i n e w h a t a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s e x i s t i n C a n a d i a n n u r s i n g e d u c a t i o n p r o g r a m s w i t h r e s p e c t t o t h e a s s e s s m e n t o f c l i n i c a l a p p e a l s , t o d e t e r m i n e a s p e c t s o f t h e i r e f f e c t i v e n e s s a n d t h e n t o d e r i v e r e c o m m e n d a t i o n s f o r p r a c t i c e . R e l a t i o n s h i p s b e t w e e n t h e s e a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s a n d t h e i n c i d e n c e o f g r i e v a n c e s a n d a p p e a l s w e r e a l s o a s s e s s e d . T h i s a n a l y s i s i s s e p a r a t e d i n t o t h r e e p a r t s : t h e f i r s t d e a l s w i t h a n a n a l y s i s o f t h e r e s p o n d e n t s ' d e m o g r a p h i c d a t a . T h e s e c o n d d e s c r i b e s e x i s t i n g a d m i n i s t r a t i v e s t r u c t u r e s a n d p r o c e d u r e s , a s r e p o r t e d b y p r o g r a m r e s p o n d e n t s , f o l l o w e d b y t h e t h i r d , a d e s c r i p t i o n o f d a t a r e l a t e d t o t h e i n c i d e n c e o f g r i e v a n c e s a n d a p p e a l s i n r e p o r t i n g p r o g r a m s . T h e l a t t e r p a r t w i l l b e d i s c u s s e d i n t h e n e x t c h a p t e r . 113 A n a l y s i s o f D e m o g r a p h i c D a t a An a c c e s s i b l e p o p u l a t i o n o f 81 programs p a r t i c i p a t e d i n t h i s p h a s e o f t h e d a t a c o l l e c t i o n . Of t h i s number, 57 r e s p o n d e n t s a l s o p r o v i d e d c o p i e s o f t h e i r p r o g r a m ' s p o l i c i e s , t h e i r i n s t i t u t i o n ' s g r i e v a n c e and a p p e a l s y s t e m s and/or t h e i r p r o c e d u r e s p e r t a i n i n g t o c l i n i c a l e v a l u a t i o n . D a t a were c o l l e c t e d i n r e l a t i o n t o s i x d e m o g r a p h i c v a r i a b l e s : (1) g e o g r a p h i c l o c a t i o n o f t h e i n s t i t u t i o n , (2) t y p e o f i n s t i t u t i o n w i t h i n w h i c h t h e p r o g r a m o p e r a t e s , (3) t o t a l s t u d e n t e n r o l l m e n t o f t h e i n s t i t u t i o n , (4) t y p e o f n u r s i n g program, (5) number o f s t u d e n t s e n r o l l e d i n t h e p r o g r a m , and (6) t h e a v e r a g e age o f n u r s i n g s t u d e n t s c u r r e n t l y i n t h e p r o g r a m . G e o g r a p h i c l o c a t i o n o f i n s t i t u t i o n s : R e s p o n d e n t s r e p r e s e n t e d a l l p r o v i n c e s i n Canada e x c e p t Quebec w h i c h was e x c l u d e d f r o m t h e s t u d y f o r r e a s o n s s t a t e d e a r l i e r . T h e l a r g e s t number o f r e s p o n d e n t s (32) was from O n t a r i o and t h e s m a l l e s t number was from P r i n c e Edward I s l a n d ( o n e ) . A t o t a l p o p u l a t i o n r e s p o n s e was r e c e i v e d f r o m f o u r o f t h e p r o v i n c e s : B r i t i s h C o l u m b i a , S a s k a t c h e w a n , 114 M a n i t o b a , a n d P r i n c e E d w a r d I s l a n d ( r e f e r t o T a b l e 3 ) . T h e o v e r a l l r e s p o n s e r a t e w a s 8 6 . 2 % . T a b l e 3 . - - N u m b e r o f R e s p o n d e n t s b y P r o v i n c e P R O V I N C E Q U E S T I O N N A I R E S Q U E S T I O N N A I R E S R E T U R N E D S E N T B C 1 0 1 0 1 0 0 . 0 A B 1 0 1 3 7 6 . 9 S K 3 3 1 0 0 . 0 M B 7 7 1 0 0 . 0 ON 3 2 3 9 8 2 . 1 N B 6 7 8 5 . 7 N S 8 9 8 8 . 9 P E 1 1 1 0 0 . 0 N F 4 5 8 0 . 0 T O T A L 8 1 9 4 8 6 . 2 T y p e o f I n s t i t u t i o n : A s s h o w n i n T a b l e 4 , f i v e t y p e s o f i n s t i t u t i o n s w e r e i n c l u d e d : h o s p i t a l s , c o l l e g e s , i n s t i t u t e s o f t e c h n o l o g y , u n i v e r s i t i e s , a n d i n d e p e n d e n t p r o g r a m s . T h e t y p e o f i n s t i t u t i o n w h i c h o f f e r s n u r s i n g p r o g r a m s v a r i e s f r o m p r o v i n c e t o p r o v i n c e a s s h o w n i n T a b l e 5 . O n t a r i o p r o v i d e s n u r s i n g p r o g r a m s o n l y i n c o l l e g e a n d u n i v e r s i t y s e t t i n g s w h i l e N o v a S c o t i a a n d 115 T a b l e 4 . - - R e s p o n d e n t s t o S t u d y b y T y p e o f I n s t i t u t i o n T Y P E O F I N S T I T U T I O N N U M B E R OF % O F R E S P O N D E N T S T O T A L C o l l e g e 3 7 4 5 . 7 H o s p i t a l 2 0 2 4 . 7 U n i v e r s i t y 1 5 1 8 . 5 I n d e p e n d e n t P r o g r a m s 6 7 . 4 T e c h n i c a l I n s t i t u t e 3 3 . 7 T O T A L 8 1 1 0 0 . 0 T a b l e 5.-- - T y p e o f I n s t i t u t i o n R e s p o n d i n g t o S t u d y b y P r o v i n c e P R O V I N C E T Y P E O F I N S T I T U T I O N T O T A L H O S P . C O L L . T E C H . I N S T . U N I V . I N D E P . B-C 1 7 1 1 0 1 0 A B 3 6 0 1 0 1 0 S K 0 0 2 1 0 3 M B 4 2 0 1 0 7 ON 0 2 5 0 7 0 3 2 N B 0 0 0 1 5 6 N S 6 0 0 2 0 8 P E 0 0 0 0 1 1 N F 3 0 0 • 1 0 4 T O T A L 1 7 4 0 3 1 5 6 8 1 N e w f o u n d l a n d p r o v i d e t h e s e p r o g r a m s o n l y i n h o s p i t a l s a n d u n i v e r s i t i e s . P r i n c e E d w a r d I s l a n d a n d N e w B r u n s w i c k p r o v i d e n u r s i n g p r o g r a m s i n i n d e p e n d e n t 116 n u r s i n g s c h o o l s w h i l e S a s k a t c h e w a n o f f e r s n u r s i n g p r o g r a m s i n e i t h e r t e c h n i c a l i n s t i t u t e s o r u n i v e r s i t i e s . B r i t i s h C o l u m b i a , A l b e r t a , a n d M a n i t o b a p r o v i d e t h e s e p r o g r a m s i n h o s p i t a l s , c o l l e g e s , a n d u n i v e r s i t i e s . S t u d e n t E n r o l l m e n t i n N u r s i n g P r o g r a m s : T h e s t u d e n t e n r o l l m e n t i n d i p l o m a n u r s i n g p r o g r a m s r a n g e d f r o m 5 0 t o 5 0 0 s t u d e n t s w i t h t h e a v e r a g e e n r o l l m e n t b e i n g r e p o r t e d a s 1 9 6 s t u d e n t s ( s e e T a b l e 6 ) . T h e l o w e s t e n r o l l m e n t w a s 5 6 a n d t h e h i g h e s t w a s 5 0 0 s t u d e n t s . T h e s t u d e n t e n r o l l m e n t i n b a s i c b a c c a l a u r e a t e n u r s i n g p r o g r a m s r a n g e d f r o m 5 0 t o 4 0 0 s t u d e n t s w i t h ' t h e a v e r a g e e n r o l l m e n t b e i n g 2 5 8 s t u d e n t s . T h e h i g h e s t e n r o l l m e n t w a s 4 0 0 s t u d e n t s a n d t h e 1 o w e s t w a s 6 5 . T y p e s o f n u r s i n g p r o g r a m s o f f e r e d b y t h e i n s t i t u t i o n : A p p r o x i m a t e l y 8 2 . 6 % o f t h e i n s t i t u t i o n s r e p o r t e d t h a t t h e y o f f e r e d d i p l o m a p r o g r a m s , 1 8 . 5 % s t a t e d t h e y o f f e r e d b a s i c b a c c a l a u r e a t e p r o g r a m s , a n d a p p r o x i m a t e l y 1 4 . 8 % p r o v i d e d p o s t - R . N . b a c c a l a u r e a t e p r o g r a m s ( r e f e r t o T a b l e 7 ) . S o m e o f t h e s e i n s t i t u t i o n s o f f e r e d m o r e t h a n o n e t y p e o f n u r s i n g p r o g r a m . 117 T a b l e 6 . - - S t u d e n t E n r o l l m e n t i n D i p l o m a a n d B a s i c B a c c a l a u r e a t e N u r s i n g P r o g r a m s 5 0 0 o T j — I — 2 — 3 — 4 " — 5 — 5 — 7 — 8 — 9 1 0 1 1 1 2 1 3 1 4 1 5 N u m b e r o f P r o g r a m s A g e o f s t u d e n t s e n t e r i n g n u r s i n g p r o g r a m s : T a b l e 8 s h o w s t h a t , f o r i n s t i t u t i o n s o f f e r i n g t h e d i p l o m a p r o g r a m , t h e m o d a l a g e w a s t h e c a t e g o r y 2 2 t o 2 4 y e a r s a n d t h e r a n g e w a s f r o m t h e c a t e g o r y 1 6 t o 1 8 u p t o o n e i n s t i t u t i o n a t 3 4 p l u s . F o r t h o s e i n s t i t u t i o n s o f f e r i n g b a s i c b a c c a l a u r e a t e p r o g r a m s , 118 T a b l e 7 . - - T y p e o f N u r s i n g P r o g r a m O f f e r e d b y I n s t i t u t i o n T Y P E O F P R O G R A M N U M B E R O F % O F R E S P O N D E N T S T O T A L ( N = 8 1 ) D i p i o m a 6 7 8 2 , . 6 B a s i c B a c c a l a u r e a t e 1 5 1 8 . . 5 P o s t R . N . B a c c a l a u r e a t e 1 2 1 4 . . 8 M a s t e r s 8 9 . . 9 O t h e r * 1 7 2 1 . . 0 N o r e s p o n s e 1 1 , . 2 * T h i s c a t e g o r y r e p r e s e n t e d s o m e P r a c t i c a l N u r s i n g ( N u r s i n g A s s i s t a n t ) a n d p o s t - b a s i c s p e c i a l t y p r o g r a m s . T a b l e 8 . - - A v e r a g e A g e o f S t u d e n t s E n t e r i n g D i p l o m a a n d B a s i c B a c c a l a u r e a t e N u r s i n g P r o g r a m s D u r i n g t h e 1 9 8 4 - 8 5 A c a d e m i c Y e a r A G E R A N G E D I P L O M A % B A C C A L A U R E A T E % OF P R O G R A M T O T A L P R O G R A M T O T A L 1 6 - 1 8 y e a r s 1 1 . 5 1 6 . 7 1 9 - 2 1 y e a r s 1 9 2 9 . 7 1 2 8 0 . 0 2 2 - 2 4 y e a r s 2 8 4 3 . 8 0 0 . 0 2 5 - 2 7 y e a r s 1 1 1 7 . 2 0 0 . 0 2 8 - 3 0 y e a r s 0 0 . 0 0 0 . 0 3 1 - 3 3 y e a r s 0 0 . 0 • 0 0 . 0 3 4 + y e a r s 1 1 . 5 0 0 . 0 N o r e s p o n s e 4 6 . 3 2 1 3 . 3 T O T A L 6 4 1 0 0 . 0 1 5 1 0 0 . 0 t h e m o d a l a g e i s t h e c a t e g o r y 1 9 t o 2 1 a n d t h e r e i s o n l y o n e i n s t i t u t i o n w i t h a n a v e r a g e a g e a t 1 6 t o 1 8 . 119 A n a l y s i s o f E x i s t i n g A d m i n i s t r a t i v e S t r u c t u r e s a n d P r o c e d u r e s D i s c u s s i o n f o c u s e s o n t w o s e t s o f v a r i a b l e s : t h o s e a r i s i n g f r o m t h e D a t a G e n e r a t i o n M o d e l , a n d t h o s e s e l e c t e d f r o m G o l d e n ' s s t u d y ( 1 9 8 1 ) . T h e c o n s i s t e n c y o f t h e G o l d e n r e s u l t s w i t h t h i s s t u d y ' s p r o t o t y p i c m o d e l s w i l l t h e n b e e x a m i n e d . F i n a l l y , t h e r e l i a b i l i t y a n d v a l i d i t y o f t h e d a t a o b t a i n e d w i l l b e d i s c u s s e d . T h e D a t a G e n e r a t i o n M o d e l s p e c i f i e s f i v e v a r i a b l e s w h i c h o c c u r i n a l l t h e v a r i o u s l e v e l s o f r e v i e w w i t h i n i n s t i t u t i o n s . T h e s e v a r i a b l e s a r e : ( 1 ) t h e p o s i t i o n o f t h e d e c i s i o n - m a k e r , ( 2 ) t h e l o c a t i o n o f t h e d e c i s i o n - m a k e r , ( 3 ) f u n c t i o n s o f t h e d e c i s i o n - m a k e r , ( 4 ) c o n t r o l s p l a c e d o n t h e d e c i s i o n - m a k e r , a n d ( 5 ) r e v i e w m e c h a n i s m s a v a i l a b l e t o s t u d e n t s . D a t a r e l a t e d t o t h e a b o v e v a r i a b l e s a r e d i s c u s s e d a c r o s s t h e f o u r l e v e l s o f r e v i e w w i t h i n i n s t i t u t i o n s t h a t i s , L e v e l I - - A s s e s s m e n t o f S t u d e n t s ' 1 C l i n i c a l P e r f o r m a n c e , L e v e l I I - - I n f o r m a l G r i e v a n c e R e v i e w o f S t u d e n t C l i n i c a l P e r f o r m a n c e D e c i s i o n s , L e v e l I I I - - F o r m a l A p p e a l H e a r i n g o f S t u d e n t C l i n i c a l P e r f o r m a n c e D e c i s i o n s , a n d L e v e l I V - - I n s t i t u t i o n a l S t u d e n t A p p e a l . 120 T h e p o s i t i o n ( s ) o f t h e d e c i s i o n - m a k e r : R e s p o n d e n t s w e r e a s k e d t o i d e n t i f y t h e d e c i s i o n - m a k e r a t e a c h l e v e l o f r e v i e w . A s s h o w n i n T a b l e 9 , 6 3 . 0 % o f t h e T a b l e 9 . - - T h e N u m b e r o f I n d i v i d u a l s M a k i n g a D e c i s i o n R e g a r d i n g a S t u d e n t ' s C l i n i c a l P e r f o r m a n c e L E V E L I D E C I S I O N - N U M B E R O F * % O F % O F M A K E R O F R E S P O N S E S T O T A L P R O G R A M S O n e i n s t r u c t o r o n l y 2 8 2 9 . 5 3 4 . 6 M o r e t h a n o n e i n s t r u c t o r : * 5 1 5 4 . 0 6 3 . 0 I n s t r u c t o r p l u s R N s u p e r v i s o r 2 2 2 3 . 2 2 7 . 2 N u r s i n g p r o g r a m c o m m i t t e e 2 0 2 1 . 1 2 4 . 7 I n s t r u c t o r p l u s s u p e r v i s o r o f c l i n i c a l i n s t r u c t o r 9 9 . 5 1 1 . 1 I n s t r u c t o r p l u s p r o g r a m h e a d 6 6 . 3 7 . 4 I n s t r u c t o r p l u s t o t a l f a c u l t y 4 4 . 2 4 . 9 I n s t r u c t o r p l u s a n o t h e r i n s t r u c t o r ( u n s p e c i f i e d ) 3 3 . 2 3 . 7 T O T A L 9 5 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 81. r e s p o n d e n t s i n d i c a t e d t h a t m o r e t h a n o n e i n s t r u c t o r m a d e t h e o r i g i n a l d e c i s i o n a b o u t n u r s i n g s t u d e n t s ' c l i n i c a l p e r f o r m a n c e ( L e v e l I ) , w h i l e 3 4 . 5 % i n d i c a t e d t h a t o n l y o n e i n s t r u c t o r m a d e s u c h d e c i s i o n s . 121 W h e r e r e s p o n d e n t s i n d i c a t e d t h a t m o r e t h a n o n e i n s t r u c t o r m a d e d e c i s i o n s r e g a r d i n g s t u d e n t s ' p e r f o r m a n c e , 2 7 . 2 % o f t h e t o t a l r e p o r t e d t h a t t h e r e g i s t e r e d n u r s e s u p e r v i s i n g t h e s t u d e n t i n t h e c l i n i c a l a r e a w a s a l s o i n v o l v e d i n s u c h a d e c i s i o n , w h i l e t h e n e x t m o s t f r e q u e n t s o u r c e w a s a n u r s i n g f a c u l t y c o m m i t t e e ( 2 4 . 7 % o f r e s p o n d e n t s ) . I n a l m o s t o n e - t h i r d o f t h e p r o g r a m s a n i n d i v i d u a l i n s t r u c t o r a l o n e m a k e s t h e d e c i s i o n r e g a r d i n g a s t u d e n t ' s c l i n i c a l p e r f o r m a n c e . O f t h e r e m a i n i n g p r o g r a m s p r o v i d i n g m o r e i n p u t i n t o s u c h d e c i s i o n s , t h e o t h e r s o u r c e s w e r e m o s t f r e q u e n t l y a r e g i s t e r e d n u r s e s u p e r v i s i n g t h e s t u d e n t o r a f a c u l t y c o m m i t t e e . I n o n l y 3 . 2 % o f t h e r e p o r t i n g p r o g r a m s i s a n i n d e p e n d e n t s e c o n d i n s t r u c t o r i n v o l v e d i n f o r m u l a t i n g t h e d e c i s i o n r e g a r d i n g a s t u d e n t ' s c l i n i c a l p e r f o r m a n c e . R e s p o n d e n t s w e r e a s k e d t o i d e n t i f y i f a n i n d i v i d u a l o r g r o u p o u t s i d e o f t h e n u r s i n g p r o g r a m r e v i e w e d t h e d e c i s i o n s r e a c h e d b y t h e n u r s i n g f a c u l t y t h a t i s , o n c e t h e i n i t i a l d e c i s i o n i s r e a c h e d b y e i t h e r a c l i n i c a l i n s t r u c t o r a l o n e o r i n c o n s u l t a t i o n w i t h o n e o f t h e a b o v e i n d i v i d u a l s o r g r o u p s , i s i t a g a i n 122 r e v i e w e d ? T a b l e 1 0 s h o w s t h a t i n o n l y o n e - t h i r d o f t h e p r o g r a m s d o e s s u c h a r e v i e w o c c u r . I n t h e r e m a i n i n g t w o - t h i r d s o f t h e p r o g r a m s , d a t a w e r e n o t p r o v i d e d . T h i s l e a d s t o t h e p o s s i b i l i t y t h a t e i t h e r t h e r e q u e s t f o r i n f o r m a t i o n c o n c e r n i n g s u c h r e v i e w s w a s n o t c l e a r a n d r e s p o n d e n t s c h o s e t o n o t a n s w e r , o r t h a t i n t h e r e m a i n i n g p r o g r a m s s u c h a r e v i e w d o e s n o t o c c u r . F r o m t h e d a t a p r o v i d e d , i t a p p e a r s t h a t t h e d e c i s i o n - m a k e r a t l e v e l I i s m o s t l i k e l y t o b e : ( a ) a s t u d e n t ' s c l i n i c a l i n s t r u c t o r , ( b ) t h e c l i n i c a l i n s t r u c t o r i n c o n j u n c t i o n w i t h t h e r e g i s t e r e d n u r s e s u p e r v i s i n g t h e s t u d e n t , o r ( c ) a f a c u l t y c o m m i t t e e , a n d t h a t t h e r e i s l i k e l y n o e x t e r n a l r e v i e w o f t h e d e c i s i o n . T a b l e 1 0 . - - E x t e r n a l P r o g r a m R e v i e w o f C l i n i c a l E v a l u a t i o n D e c i s i o n s I N D I V I D U A L OR G R O U P N U M B E R % O F T O T A L D i r e c t o r o f P r o g r a m 1 1 1 3 . 6 I n s t i t u t i o n a l C o m m i t t e e 1 0 1 2 . 3 D e a n o f d i v i s i o n , s c h o o l o r f a c u l t y 5 6 . 2 H o r e s p o n s e 5 5 6 7 . 9 T O T A L 8 1 1 0 0 . 0 123 T a b l e 1 1 s h o w s t h a t a t l e v e l I I , t h e g r i e v a n c e r e v i e w w a s m o s t l i k e l y t o b e c o n d u c t e d b y e i t h e r a n u r s i n g p r o g r a m s t a n d i n g c o m m i t t e e o r a s p e c i a l g r i e v a n c e r e v i e w p a n e l . I n 7 . 4 % o f t h e p r o g r a m s , n o t o n l y d i d t h e s t u d e n t L s c l i n i c a l i n s t r u c t o r s e r v e o n t h e p a n e l , b u t s h e o r h e a l s o c o n d u c t e d t h e g r i e v a n c e r e v i e w . T a b l e 1 1 . - - P r o v i s i o n s f o r C o n d u c t i n g a G r i e v a n c e R e v i e w P E R S O N OR G R O U P N U M B E R % OF C O N D U C T I N G R E V I E W O F P R O G R A M S P R O G R A M S N u r s i n g p r o g r a m s t a n d i n g c t t e . 2 4 2 9 . 6 S p e c i a l g r i e v a n c e r e v i e w p a n e l 2 1 2 5 . 9 H e a d o f n u r s i n g p r o g r a m 1 1 1 3 . 6 S t u d e n t ' s c l i n i c a l i n s t r u c t o r 6 7 . 4 C o o r d i n a t o r o f t h e t e a m o r y e a r 5 6 . 2 D e a n o f d i v i s i o n 3 3 . 6 I m p a r t i a l n u r s i n g i n s t r u c t o r 2 2 . 5 H e a r i n g O f f i c e r 1 1 . 2 T o t a l f a c u l t y o f n u r s i n g p r o g r a m 1 1 . 2 A c a d e m i c A p p e a l s C o m m i t t e e o f f a c u 1 t y 1 1 . 2 U n s p e c i f i e d 3 3 . 8 N o r e s p o n s e 3 3 . 8 T O T A L 8 1 1 0 0 . 0 R e s p o n d e n t s i n o n l y 2 . 5 % o f t h e s e p r o g r a m s i n d i c a t e d t h a t t h e g r i e v a n c e r e v i e w w a s c o n d u c t e d b y a n i m p a r t i a l 124 n u r s i n g i n s t r u c t o r w h o w o u l d m o r e l i k e l y p r o v i d e a n o b j e c t i v e a p p r a i s a l . A n i n t e r e s t i n g f i n d i n g w a s t h a t o n l y o n e p r o g r a m i d e n t i f i e d t h e u s e o f a h e a r i n g o f f i c e r i n s u c h a r e v i e w . I n c o n t r a s t , i n t h e U n i t e d S t a t e s , a h e a r i n g o f f i c e r i s c o m m o n l y a d v o c a t e d a s t h e c o n d u c t o r o f s u c h r e v i e w s . L e v e l I I I r e p r e s e n t s t h e f i r s t f o r m a l l e v e l o f r e v i e w ; " f o r m a l " m e a n i n g t h a t t h e r e a r e e s t a b l i s h e d p o l i c i e s a n d p r o c e d u r e s d i r e c t i n g t h e c o n d u c t o f t h e r e v i e w . A t t h i s l e v e l ( r e f e r t o T a b l e 1 2 ) , t h e m o s t f r e q u e n t l y c i t e d m e m b e r s o f a p p e a l h e a r i n g p a n e l s w e r e : s t u d e n t s , n u r s i n g f a c u l t y f r o m t h e n u r s i n g p r o g r a m a n d n o n - n u r s i n g f a c u l t y . O t h e r m e m b e r s i n c l u d e d t h e n u r s i n g p r o g r a m h e a d , h i s o r h e r s u p e r v i s o r , a h e a r i n g o f f i c e r , a n d t h e h e a d o f t h e i n s t i t u t i o n . I n c o n t r a s t t o t h e p r e v i o u s l e v e l , a h e a r i n g o f f i c e r w a s u s e d i n 2 4 . 7 % o f t h e p r o g r a m s a t t h i s l e v e l . T o a l e s s e r e x t e n t , n u r s e e d u c a t o r s f r o m o u t s i d e t h e i n s t i t u t i o n a n d e s t a b l i s h e d i n s t i t u t i o n a l c o m m i t t e e s w e r e i n v o l v e d i n t h e s e r e v i e w s . T h u s , i t a p p e a r s t h a t t h e r e i s a w i d e v a r i a t i o n i n t h e m e m b e r s h i p o f a p p e a l h e a r i n g p a n e l s a c r o s s t h e 125 n u r s i n g p r o g r a m s . T h e m o s t l i k e l y m e m b e r s o f t h e s e p a n e l s w o u l d b e : s t u d e n t s , n u r s i n g f a c u l t y f r o m t h e n u r s i n g p r o g r a m , n o n - n u r s i n g f a c u l t y m e m b e r s , t h e h e a d o f t h e n u r s i n g p r o g r a m , a n d a h e a r i n g o f f i c e r . L e s s T a b l e 1 2 . - - P e r s o n s I n c l u d e d i n A p p e a l H e a r i n g s P E R S O N S OR G R O U P S N U M B E R * % O F % O F I N C L U D E D O F R E S P O N S E S T O T A L P R O G R A M S S t u d e n t s 3 3 1 7 . 2 4 0 . 7 N u r s i n g f a c u l t y f r o m n u r s i n g p r o g r a m 3 1 1 6 . 2 3 8 . 3 N o n - n u r s i n g f a c u l t y 2 9 1 5 . 1 3 5 . 8 N u r s i n g p r o g r a m h e a d 2 4 1 2 . 5 2 9 . 6 H e a r i n g o f f i c e r 2 0 1 0 . 4 2 4 . 7 H e a d o f i n s t i t u t i o n 1 3 6 . 8 1 6 . 0 I m m e d i a t e s u p e r v i s o r o f t h e n u r s i n g p r o g r a m h e a d 1 5 7 . 8 1 8 . 5 N u r s e e d u c a t o r f r o m o u t s i d e i n s t i t u t i o n 7 3 . 6 8 . 6 E s t a b l i s h e d i n s t i t u t i o n a l c o m m i t t e e : 3 1 . 6 3 . 7 H e a d o f s t u d e n t s e r v i c e s 2 1 . 0 2 . 5 B o a r d o f D i r e c t o r s f o r n u r s i n g p r o g r a m 1 0 . 5 1 . 2 N u r s e , n o n - e d u c a t o r , f r o m o u t s i d e i n s t i t u t i o n 1 0 . 5 1 . 2 N o r e s p o n s e 1 3 6 . 8 1 6 . 0 T O T A L 1 9 2 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . l i k e l y m e m b e r s w o u l d b e : t h e i m m e d i a t e s u p e r v i s o r o f t h e n u r s i n g p r o g r a m h e a d , t h e h e a d o f t h e i n s t i t u t i o n , a n d a n u r s e e d u c a t o r f r o m o u t s i d e t h e i n s t i t u t i o n . 126 O n l y 4 0 . 7 % o f t h e r e s p o n d e n t s p r o v i d e d i n f o r m a t i o n r e l a t e d t o L e v e l I V , t h e I n s t i t u t i o n a l S t u d e n t A p p e a l . R e s p o n d e n t s c h o s e e i t h e r n o t t o p r o v i d e d a t a c o n c e r n i n g t h i s l e v e l o f r e v i e w o r t h e i r p r o g r a m s d o n o t p r o v i d e s u c h a l e v e l ( r e f e r t o T a b l e 1 3 ) . T h o s e w h o d i d T a b l e 1 3 . - - P r o v i s i o n s f o r I n s t i t u t i o n a l S t u d e n t A p p e a l H e a r i n g P E R S O N S OR G R O U P S N U M B E R % O F T O T A L H e a d o f i n s t i t u t i o n 1 1 1 3 . . 6 S u b - c o m m i t t e e o f s e n a t e 6 7 . , 4 H e a d o f s c h o o l , d i v i s i o n o r f a c u l t y 6 7 . . 4 E s t a b l i s h e d a p p e a l c o m m i t t e e 3 3 . . 7 S u b - c o m m i t t e e o f b o a r d o f g o v e r n o r s 3 3 . . 7 O u t s i d e a r b i t r a t o r 1 1 , . 2 A d h o c i n s t i t u t i o n a l c o m m i t t e e 1 1 , . 2 S u b - c o m m i t t e e o f b o a r d o f t r u s t e e s 0 0 , . 0 U n s p e c i f i e d 2 2 , . 5 N o r e s p o n s e 4 8 5 9 . 3 T O T A L 8 1 1 0 0 , . 0 r e s p o n d t o t h i s q u e s t i o n i n d i c a t e d t h a t t h e h e a d o f t h e i n s t i t u t i o n w a s t h e m o s t f r e q u e n t l y c i t e d i n d i v i d u a l w h o c o n d u c t e d t h e s e h e a r i n g s f o l l o w e d b y a s u b - c o m m i t t e e o f e i t h e r t h e s e n a t e , a t a u n i v e r s i t y , o r a b o a r d o f g o v e r n o r s , a t a c o l l e g e . I n o n e p r o g r a m a n o u t s i d e a r b i t r a t o r c o n d u c t s t h i s h e a r i n g . 127 I n s u m m a r y , a t L e v e l I - - A s s e s s m e n t o f S t u d e n t s ' ' C l i n i c a l P e r f o r m a n c e , t h e d e c i s i o n s w e r e m o s t f r e q u e n t l y m a d e b y c l i n i c a l i n s t r u c t o r s e i t h e r a l o n e o r i n c o n s u l t a t i o n w i t h t h e r e g i s t e r e d n u r s e s u p e r v i s i n g t h e s t u d e n t s . L e v e l I I - - G r i e v a n c e R e v i e w , d e c i s i o n s w e r e m o r e f r e q u e n t l y m a d e b y n u r s i n g p r o g r a m s ' s t a n d i n g c o m m i t t e e s . A t f o r m a l A p p e a l H e a r i n g s , L e v e l I I I , t h e p a n e l s w e r e m o s t f r e q u e n t l y c o m p o s e d o f s t u d e n t s , n u r s i n g f a c u l t y f r o m t h e n u r s i n g p r o g r a m , n o n - n u r s i n g f a c u l t y , t h e n u r s i n g p r o g r a m h e a d , a n d a h e a r i n g o f f i c e r . A t L e v e l I V , I n s t i t u t i o n a l S t u d e n t A p p e a l h e a r i n g s w e r e p r o v i d e d b y e i t h e r t h e h e a d o f t h e i n s t i t u t i o n o r b y a s u b - c o m m i t t e e o f t h e g o v e r n i n g b o a r d o f t h e i n s t i t u t i o n ( r e f e r t o T a b l e 1 4 ) . T a b l e 1 4 . - - S u m m a r y o f P r o v i s i o n s f o r L e v e l s o f R e v i e w L E V E L D E C I S I O N - M A K E R N U M B E R % O F T O T A L I O n e i n s t r u c t o r o n l y M o r e t h a n o n e i n s t r u c t o r 2 8 5 1 3 4 . 6 6 3 . 0 I I N u r s i n g p r o g r a m s t a n d i n g S p e c i a l G r i e v a n c e R e v i e w O t h e r c t t e . P a n e l 2 4 2 1 3 0 2 9 . 6 2 5 . 9 3 7 . 0 128 T a b l e 1 4 . - - S u m m a r y o f P r o v i s i o n s f o r L e v e l s o f R e v i e w ( c o n t i n u e d ) L E V E L D E C I S I O N - M A K E R N U M B E R % O F T O T A L S t u d e n t s 3 3 * 2 1 . 0 N u r s i n g f a c u l t y f r o m p r o g r a m 3 1 * 1 9 . 7 N o n - n u r s i n g f a c u l t y 2 9 * 1 8 . 5 N u r s i n g p r o g r a m h e a d 2 3 * 1 4 . 6 O t h e r 4 1 * 2 6 . 1 H e a d o f i n s t i t u t i o n 1 1 1 3 . 6 O t h e r 2 0 2 4 . 7 F o r d e f i n i t i o n s o f L e v e l s s e e p a g e 1 2 2 . * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . L o c a t i o n o f t h e d e c i s i o n - m a k e r : P r o g r a m r e s p o n d e n t s w e r e a s k e d t o i d e n t i f y w h e t h e r t h e d e c i s i o n a t e a c h l e v e l o f r e v i e w o c c u r r e d w i t h i n t h e p r o g r a m , m e a n i n g a r e v i e w w h i c h w a s c o n d u c t e d b y n u r s i n g p r o g r a m f a c u l t y ; i n s i d e t h e i n s t i t u t i o n , m e a n i n g t h a t t h e r e v i e w w a s c o n d u c t e d b y m e m b e r s o f t h e e d u c a t i o n a l i n s t i t u t i o n w h o w e r e n o t n e c e s s a r i l y n u r s i n g f a c u l t y ; o r o u t s i d e t h e i n s t i t u t i o n , m e a n i n g a r e v i e w w h i c h w a s c o n d u c t e d b y i n d i v i d u a l s w h o w e r e n o t e m p l o y e e s o f t h e e d u c a t i o n a l i n s t i t u t i o n ( r e f e r t o T a b l e 1 5 ) . 129 T a b l e 1 5 . - - L o c a t i o n o f R e v i e w e r s a t t h e F o u r L e v e l s o f R e v i e w D E C I S I O N - M A K E R I N S I D E I N S I D E O U T S I D E P R O G R A M I N S T L N I N S T ' N N U M B E R % N U M B E R % N U M B E R % L E V E L I - - A S S E S S M E N T O F S T U D E N T S 1 ' C L I N I C A L P E R F O R M A N C E : O n e i n s t r u c t o r o n l y 2 8 2 9 . 5 M o r e t h a n o n e i n s t r u c t o r : I n s t r u c t o r p l u s - - C l i n i c a l s u p e r v i s o r 2 2 2 3 . 2 N u r s i n g p r o g r a m c t t e 2 0 2 1 . 1 I n s t r u c t o r s r e s p o n - s i b l e f o r c o u r s e 7 7 . 3 S u p e r v i s o r o f s a m e 9 9 . 4 P r o g r a m h e a d 6 6 . 3 A n o t h e r i n s t r u c t o r 3 3 . 2 T O T A L 7 3 7 6 . 8 0 0 0 . 0 2 2 2 3 . 2 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . L E V E L I I - - G R I E V A N C E R E V I E W : N u r s i n g p r o g r a m s t a n d i n g c t t e . 2 4 2 9 . 7 H e a d , n u r s i n g p r o g r a m 1 1 1 3 . 6 C l i n i c a l i n s t r u c t o r 6 7 . 4 C o o r d i n a t o r o f t e a m o r y e a r 5 6 . 2 I m p a r t i a l n u r s i n g i n s t r u c t o r 2 2 . 5 T o t a l n u r s i n g f a c u l t y 1 1 . 2 F a c u l t y a p p e a l s c t t e 1 1 . 2 S p e c i a l G r i e v a n c e R e v i e w P a n e l 2 1 2 5 . 9 D e a n o f d i v i s i o n 3 3 . 7 H e a r i n g O f f i c e r 1 1 . 2 N o r e s p o n s e 6 7 . 4 T O T A L 5 6 6 9 . 2 2 5 3 0 . 8 0 0 0 . 0 130 T a b l e 1 5 . - - L o c a t i o n o f R e v i e w e r s a t t h e F o u r L e v e l s o f R e v i e w ( c o n t i n u e d ) D E C I S I O N - M A K E R I N S I D E P R O G R A M N U M B E R % I N S I D E I N S T '' N N U M B E R % O U T S I D E I N S T x N N U M B E R % L E V E L I I I -- A P P E A L H E A R I N G : N u r s i n g f a c u l t y f r o m p r o g r a m 3 1 1 9 . 6 N u r s i n g p r o g r a m h e a d 2 3 1 4 . 6 S t u d e n t s 3 3 2 0 . 9 N o n - n u r s i n g f a c u l t y 2 9 1 8 . 4 H e a d o f i n s t i t u t i o n 1 3 8 . 2 I m m e d i a t e s u p e r v i s o r o f n u r s i n g h e a d E s t L d i n s t ' a l c t t e . 1 5 9 . 5 3 1 . 9 H e a d o f s t u d e n t s e r v i c e s 2 1 . 3 N u r s i n g f a c u l t y f r o m o u t s i d e i n s t i t u t i o n B o a r d o f D i r e c t o r s N u r s e , n o n - e d u c a t o r f r o m o u t s i d e i n s t i t u t i o n 4 . 4 0 . 6 1 0 . 6 T O T A L 5 4 3 4 . 2 9 5 6 0 . 2 9 5 . 6 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . L E V E L I V - - I N S T I T U T I O N A L H e a d o f i n s t i t u t i o n S e n a t e s u b - c o m m i t t e e H e a d o f s c h o o l , d i v i s i o n , s c h o o l A p p e a l c o m m i t t e e A d h o c i n s t i t u t i o n a l c o m m i t t e e B o a r d o f g o v e r n o r s s u b - c o m m i t t e e O u t s i d e a r b i t r a t o r N o r e s p o n s e S T U D E N T A P P E A L : ( N = 8 1 ) 1 1 1 3 . 7 6 7 . 4 6 7 . 4 3 3 . 7 1 1 . 2 3 3 . 7 5 0 6 1 . 7 T O T A L 7 7 9 5 . 1 4 4 . 9 131 B o t h l e v e l I a n d l e v e l I I r e v i e w s w e r e g e n e r a l l y c o n d u c t e d b y n u r s i n g p r o g r a m f a c u l t y w i t h t h e e x c e p t i o n o f f a c u l t y d e p e n d e n c y o n i n p u t i n t o s t u d e n t c l i n i c a l d e c i s i o n s b y t h e r e g i s t e r e d n u r s e s s u p e r v i s i n g t h e s e s t u d e n t s . H o w e v e r , i n o n e - q u a r t e r o f t h e p r o g r a m s a t l e v e l I I , o t h e r n o n - n u r s i n g p r o g r a m o f f i c i a l s f r o m t h e e d u c a t i o n a l i n s t i t u t i o n s w e r e a l s o i n v o l v e d i n t h e s e r e v i e w s . A p p e a l h e a r i n g p a n e l s w e r e c o m p o s e d o f r e p r e s e n t a t i v e s f r o m t h e n u r s i n g p r o g r a m , o t h e r i n s t i t u t i o n a l o f f i c i a l s a n d , i n n i n e p r o g r a m s , r e p r e - s e n t a t i v e s w h o w e r e n o t e m p l o y e e s o f t h e i n s t i t u t i o n s . L e v e l I V r e v i e w p a n e l s w e r e e i t h e r n o n - n u r s i n g f a c u l t y i n s t i t u t i o n a l e m p l o y e e s o r , i n a l i m i t e d n u m b e r o f p r o g r a m s , n o n - i n s t i t u t i o n a l e m p l o y e e s . G e n e r a l l y , r e s p o n d e n t s r e p o r t e d t h a t L e v e l I - - A s s e s s m e n t o f S t u d e n t s ' ' C l i n i c a l P e r f o r m a n c e o c c u r r e d w i t h i n t h e p r o g r a m w h i l e l e v e l I I - - I n f o r m a l G r i e v a n c e R e v i e w - - o c c u r r e d w i t h i n t h e i n s t i t u t i o n , b u t t o o k p l a c e o u t s i d e t h e n u r s i n g p r o g r a m w i t h t h e e x c e p t i o n o f u n i v e r s i t y p r o g r a m s . I n u n i v e r s i t i e s , s u c h a r e v i e w g e n e r a l l y o c c u r r e d w i t h i n t h e p r o g r a m . B o t h l e v e l I I I - - F o r m a l A p p e a l H e a r i n g s - - a n d l e v e l I V - - 1 3 2 I n s t i t u t i o n a l S t u d e n t A p p e a l s - - g e n e r a l l y o c c u r r e d w i t h i n i n s t i t u t i o n s b u t e x t e r n a l t o p r o g r a m s ( r e f e r t o T a b l e 1 6 ) . T a b l e 1 6 . - - L o c a t i o n o f D e c i s i o n - m a k e r a t e a c h L e v e l o f R e v i e w o f S t u d e n t s ' C l i n i c a l E v a l u a t i v e D e c i s i o n s L E V E L I N S I D E I N S I D E O U T S I D E P R O G R A M I N S T I T U T I O N I N S T I T U T I O N N U M B E R % N U M B E R % N U M B E R % I 7 3 7 6 . 8 0 0 0 . 0 2 2 2 3 . 2 1 1 5 0 6 9 . 2 2 5 3 0 . 8 0 0 . 0 I I I 5 4 3 4 . 2 9 5 6 0 . 2 9 5 . 6 I V 0 0 . 0 2 7 3 3 . 3 4 4 . 9 F u n c t i o n s o f t h e d e c i s i o n - m a k e r . T h e d e c i s i o n - m a k e r w a s l i k e l y t o p e r f o r m a v a r i e t y o f r o l e s a s p a r t o f e a c h l e v e l o f r e v i e w . T h e s e r o l e s c o u l d i n c l u d e : d e t e r m i n a t i o n o f w h o w o u l d b e i n t e r v i e w e d , w h a t e v i d e n c e o r d o c u m e n t s c o u l d b e a l l o w e d d u r i n g t h e r e v i e w , w h e t h e r t h e p a r t i e s c o u l d b e a s s i s t e d b y a d v i s o r s a n d w h a t r o l e t h e s e a d v i s o r s m i g h t p e r f o r m , t h e p a r t i c u l a r a s p e c t s o f t h e d e c i s i o n t h a t t h e r e v i e w s a r e t o a d d r e s s , a n d t h e f o r m o f d o c u m e n t a t i o n o f t h e 1 3 3 r e v i e w . R e s p o n d e n t s w e r e a s k e d t o p r o v i d e i n f o r m a t i o n r e l a t i n g t o t h e a b o v e t o f a c i l i t a t e a n u n d e r s t a n d i n g o f t h e f u n c t i o n s d e c i s i o n - m a k e r s p e r f o r m e d d u r i n g a l l l e v e l s o f r e v i e w i n t h e i r i n s t i t u t i o n s . A t l e v e l I , d a t a w e r e c o l l e c t e d t o d e t e r m i n e w h i c h s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e w e r e r e v i e w e d , f i r s t l y , w i t h i n t h e n u r s i n g p r o g r a m s a n d , t h e n , w h e t h e r t h e r e w a s a n y f u r t h e r r e v i e w o f t h e s e d e c i s i o n s o u t s i d e t h e n u r s i n g p r o g r a m s ( r e f e r t o T a b l e 1 7 ) . I n t h i s c a s e " o u t s i d e " c o u l d m e a n a d i v i s i o n a l c o m m i t t e e c o m p o s e d o f h e a d s o f s e v e r a l p r o g r a m s w h o m e e t t o r e v i e w a l l s t u d e n t s ' " m a r k s t o e n s u r e c o n s i s t e n c y i n t h e a p p l i c a t i o n o f i n s t i t u t i o n a l p o l i c i e s a n d p r o c e d u r e s . A p p r o x i m a t e l y o n e - t h i r d o f t h e r e s p o n d e n t s r e p o r t e d t h a t a l l s t u d e n t s ' " c l i n i c a l p e r f o r m a n c e i n a s p e c i f i c c l i n i c a l c o u r s e a s w e l l a s t h e p e r f o r m a n c e o f t h o s e s t u d e n t s w h o h a d d i f f i c u l t y i n m e e t i n g c o u r s e o b j e c t i v e s w e r e r e v i e w e d b y f a c u l t y . S t u d e n t s b e i n g c o n s i d e r e d f o r f a i l u r e w e r e r e v i e w e d i n o n e - q u a r t e r o f t h e r e s p o n d i n g p r o g r a m s . I t a p p e a r s t h a t t h o s e p r o g r a m s n o t p r o v i d i n g a r e s p o n s e t o t h i s q u e s t i o n e i t h e r d o n o t p r o v i d e a f u r t h e r r e v i e w o f e v a l u a t i v e T a b l e 1 7 . - - S t u d e n t s ' C l i n i c a l P e r f o r m a n c e s R e v i e w e d a t L e v e l I B o t h I n s i d e t h e N u r s i n g P r o g r a m a n d O u t s i d e o f t h e N u r s i n g P r o g r a m S T U D E N T S x C L I N I C A L I N S I D E N U R S I N G O U T S I D E N U R S I N G P E R F O R M A N C E S P R O G R A M P R O G R A M R E V I E W E D N U M B E R % OF % O F N U M B E R % O F % O F T O T A L P R O G R A M S T O T A L P R O G R A M S A l l s t u d e n t s i n c l i n i c a l c o u r s e S t u d e n t s w h o h a d d i f f i c u l t y m e e t i n g c o u r s e o b j e c t i v e s S t u d e n t s b e i n g c o n s i d e r e d f o r f a i 1 u r e N o r e s p o n s e 3 4 3 1 2 5 2 5 2 9 . 6 2 7 . 0 2 1 2 1 . 7 , 7 4 2 . 0 3 8 . 3 3 0 3 0 8 . 1 7 . 1 8 . 6 7 . 4 7 8 . 1 8 . 6 6 6 7 6 . 7 8 1 . 5 T O T A L 1 1 5 * 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . 8 6 * 1 0 0 . 0 N u m b e r o f p r o g r a m s i s 8 1 . 4>' 135 d e c i s i o n s o u t s i d e o f t h e n u r s i n g p r o g r a m o r , f o r o t h e r r e a s o n s , d i d n o t c h o o s e t o p r o v i d e a r e s p o n s e . T h e s e r e s u l t s c o u l d h a v e b e e n i n f l u e n c e d b y t h e r e s p o n d e n t s ' i n t e r p r e t a t i o n o f t h e q u e s t i o n s s e e k i n g t h e a b o v e d a t a . A l t h o u g h r e s p o n d e n t s w e r e a s k e d t o s e l e c t a s m a n y o p t i o n s t o d e s c r i b e t h e i r p r o g r a m s ' p r a c t i c e s a s t h e y n e e d e d , t h e y m a y h a v e s e l e c t e d t h e o p t i o n " a l l s t u d e n t s i n s a m e c l i n i c a l c o u r s e " a n d f e l t t h a t f u r t h e r d i s t i n c t i o n s w e r e n o t n e c e s s a r y . T a b l e 1 8 p r e s e n t s t h e f i n d i n g s c o n c e r n i n g t h e d o c u m e n t s r e v i e w e r s m o s t f r e q u e n t l y a s s e s s e d d u r i n g g r i e v a n c e r e v i e w s . R e s p o n d e n t s r e p o r t e d t h a t w r i t t e n s u b m i s s i o n s b y e i t h e r t h e s t u d e n t o r t h e s t u d e n t ' s c l i n i c a l i n s t r u c t o r w e r e t h e d o c u m e n t s m o s t f r e q u e n t l y a s s e s s e d d u r i n g t h e s e i n f o r m a l r e v i e w s . T h e s t u d e n t ' s c l i n i c a l e v a l u a t i o n r e p o r t s a n d , t o a l e s s e r e x t e n t , a n e c d o t a l n o t e s a b o u t t h e s t u d e n t ' s • p e r f o r m a n c e w e r e t h e n e x t m o s t f r e q u e n t l y c i t e d . S i n c e t h e a n e c d o t a l n o t e s c o n t a i n d o c u m e n t a t i o n r e l a t e d t o h o w s t u d e n t s p e r f o r m e d d u r i n g t h e i r c l i n i c a l e x p e r i e n c e a n d a r e u s u a l l y u s e d t o f o r m u l a t e d e c i s i o n s r e g a r d i n g s t u d e n t s ' p e r f o r m a n c e . 136 T a b l e 1 8 . - - D o c u m e n t s A s s e s s e d D u r i n g L e v e l I I G r i e v a n c e R e v i e w s D O C U M E N T S A S S E S S E D N U M B E R * % O F % O F T O T A L P R O G R A M S W r i t t e n s u b m i s s i o n f r o m s t u d e n t 7 8 1 8 . 1 9 6 . 3 W r i t t e n s u b m i s s i o n f r o m c l i n i c a l i n s t r u c t o r ( s ) 7 8 1 8 . 1 9 6 . 3 S t u d e n t ' s c l i n i c a l e v a l u a t i o n 7 4 1 7 . 2 9 1 . 4 A n e c d o t a l n o t e s a b o u t s t u d e n t ' s c l i n i c a l p e r f o r m a n c e 6 2 1 4 . 4 7 6 . 5 S t u d e n t ' s w r i t t e n a s s i g n m e n t s f o r t h e c o u r s e 5 3 1 2 . 4 6 5 . 4 S t u d e n t L s p r e v i o u s c l i n i c a l e v a l u a t i o n r e p o r t s 4 3 1 0 . 0 5 3 . 1 S t u d e n t ' s e n t i r e a c a d e m i c f i l e 3 8 8 . 8 4 6 . 9 G r i e v a n c e r e v i e w a p p l i c a t i o n 1 0 . 2 1 . 2 C o u n s e l l i n g o r h e a l t h r e c o r d 1 0 . 2 1 . 2 C o u r s e o u t l i n e 1 0 . 2 1 . 2 N o r e s p o n s e 2 0 . 4 2 . 5 T O T A L 4 3 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . F r o m t h e d a t a o b t a i n e d , a g r i e v a n c e r e v i e w w o u l d i n c l u d e a s s e s s m e n t o f w r i t t e n s u b m i s s i o n s f r o m t h e g r i e v i n g s t u d e n t a n d h i s o r h e r c l i n i c a l i n s t r u c t o r ( s ) , a s w e l l a s t h e s t u d e n t ' s c l i n i c a l e v a l u a t i o n . I d e a l l y t h e a n e c d o t a l n o t e s a b o u t t h e s t u d e n t ' s c l i n i c a l p e r f o r m a n c e w o u l d a l s o b e a s s e s s e d . R e s p o n d e n t s a l s o i n d i c a t e d t h a t s t u d e n t s ' w r i t t e n a s s i g n m e n t s f o r t h e c o u r s e s w e r e u s e d m o r e f r e q u e n t l y 137 t h a n t h e s t u d e n t s 1 p r e v i o u s c l i n i c a l e v a l u a t i o n r e p o r t s . G r i e v a n c e r e v i e w p a n e l s n o t o n l y r e v i e w e d d o c u m e n t a t i o n p r o v i d e d a b o u t t h e g r i e v a n c e s , b u t a l s o f a c i l i t a t e d i n t e r v i e w s b e t w e e n t h e a g g r i e v e d p a r t i e s ( r e f e r t o T a b l e 1 9 ) . T h u s , g e n e r a l l y g r i e v a n c e r e v i e w s i n n u r s i n g p r o g r a m s i n v o l v e d i n t e r v i e w i n g t h e g r i e v i n g s t u d e n t a n d h i s o r h e r c l i n i c a l i n s t r u c t o r s . T a b l e 1 9 . - - I n d i v i d u a l s I n t e r v i e w e d D u r i n g t h e G r i e v a n c e R e v i e w s I N D I V I D U A L S I N T E R V I E W E D N U M B E R * % OF % O F T O T A L P R O G R A M S S t u d e n t 7 0 4 4 . , 3 8 6 . . 4 S t u d e n t L s c l i n i c a l i n s t r u c t o r 6 7 4 2 . . 4 8 2 . . 7 C o o r d i n a t o r o f y e a r o r l e v e l 5 3 . . 2 6 . , 2 H e a d o f n u r s i n g p r o g r a m 3 1 . . 9 3 . . 7 C l i n i c a l a r e a p e r s o n n e l 3 1 , . 9 3 . . 7 S t u d e n t ' s p e e r s 1 0 , . 6 1 , . 2 N o r e s p o n s e 9 • 5 , . 7 1 1 , . 1 T O T A L 1 5 8 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . R a r e l y d i d p a n e l s u t i l i z e i n p u t f r o m t h e s t u d e n t ' s p e e r s . T h u s i t a p p e a r s t h a t t h e s e p a n e l s a d d r e s s e d t h e 138 s p e c i f i c s t u d e n t L s p e r f o r m a n c e a g a i n s t p r e - d e t e r m i n e d c r i t e r i a r a t h e r t h a n t h e s t u d e n t ' s p e r f o r m a n c e i n c o m p a r i s o n t o t h a t o f a n o t h e r s t u d e n t i n t h e s a m e c l i n i c a l s e t t i n g . A p p r o x i m a t e l y o n e - q u a r t e r o f t h e r e s p o n d e n t s r e p o r t e d t h a t s t u d e n t s c o u l d b r i n g a d v i s o r s t o g r i e v a n c e r e v i e w s a n d a b o u t t h e s a m e p e r c e n t a g e p r o v i d e d t h i s s u p p o r t t o t h e g r i e v i n g s t u d e n t ' s c l i n i c a l i n s t r u c t o r ( s ) . W h o t h e s e a d v i s o r s c o u l d b e a n d t h e r o l e t h e y c a n p e r f o r m i s r e p o r t e d i n T a b l e 20. T h e s e f i n d i n g s m a y n o t p r o v i d e a n a c c u r a t e a s s e s s m e n t o f t h e u s e o f l a w y e r s a s s t u d e n t s ' " a d v i s o r s b e c a u s e s e v e r a l r e s p o n d e n t s s e l e c t e d b o t h o f t h e o p t i o n s " a l a w y e r " a n d " n o t a l a w y e r . " S u c h a s e l e c t i o n w a s l i k e l y m a d e d u e t o p o o r w o r d i n g o f t h e q u e s t i o n n a i r e . T h e q u e s t i o n n a i r e s h o u l d h a v e s a i d " m a y b e o r m u s t n o t b e a l a w y e r . " P r o g r a m s w h e r e t h e r e w a s n o s p e c i f i c a t i o n a b o u t w h o t h e a d v i s o r c o u l d b e w e r e n o t g i v e n t h e a b o v e o p t i o n a n d a s a r e s u l t s e l e c t e d b o t h o p t i o n s . T h i s m a y h a v e r e s u l t e d i n a h i g h e r n u m b e r o f p r o g r a m s r e p o r t i n g t h a t l a w y e r s c o u l d b e s t u d e n t s ' a d v i s o r s a t g r i e v a n c e r e v i e w s . T o 139 c o m p e n s a t e f o r t h e a b o v e p r o b l e m , r e s p o n d e n t s s e l e c t i n g b o t h o p t i o n s h a v e h a d t h e i r r e s p o n s e s a d j u s t e d t o r e p o r t o n l y t h e o p t i o n " m a y b e l a w y e r . " T a b l e 2 0 . - - U s e o f a n d R o l e o f A d v i s o r s f o r S t u d e n t s a n d C l i n i c a l I n s t r u c t o r s D u r i n g G r i e v a n c e R e v i e w s U S E O F / R O L E S T U D E N T C L I N I C A L I N S T R ' S O F A D V I S O R S N U M B E R * % O F % O F N U M B E R * % O F % O F T O T A L P R 0 G x M T O T A L P R O G ' M I s a b l e t o b r i n g a d v i s o r 4 0 2 7 . 8 4 9 . 4 3 1 2 3 . 3 3 8 . 3 M a y b e l a w y e r 2 3 1 6 . 0 2 8 . 4 1 6 1 2 . 0 1 9 . 8 M a y n o t b e l a w y e r 5 3 . 5 1 9 . 8 1 1 8 . 3 1 3 . 6 A c t i v e p a r t i c i - p a n t 1 1 7 . 6 1 3 . 6 8 6 . 0 9 . 9 O n l y p a s s i v e p a r t i c i p a n t 1 5 1 0 . 4 1 8 . 5 8 6 . 0 9 . 9 A c t i v e p a r t i c i p a n t i f r e q u e s t e d 9 6 . 3 1 1 . 1 9 6 . 8 1 1 . 1 N o r e s p o n s e 4 1 2 8 . 4 5 0 . 6 5 0 3 7 . 6 6 1 . 7 T O T A L 1 4 4 1 0 0 . 0 1 3 3 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . T a b l e 2 1 p r o v i d e s a n i n d i c a t i o n o f t h e m e t h o d s o f r e c o r d i n g g r i e v a n c e r e v i e w s u t i l i z e d b y t h e r e s p o n d e n t s ' i n s t i t u t i o n s . 140 T a b l e 2 1 . - - M e t h o d s U t i l i z e d i n R e p o r t i n g I n s t i t u t i o n s t o R e c o r d G r i e v a n c e R e v i e w s R E C O R D I N G M E T H O D N U M B E R * % O F % O F T O T A L P R O G R A M S P r e p a r a t i o n o f a w r i t t e n s u m m a r y o f r e v i e w 6 6 7 2 . 5 8 1 . 5 P r e p a r a t i o n o f a w r i t t e n t r a n s c r i p t o f r e v i e w 1 0 1 1 . 0 1 2 . 3 T a p e r e c o r d i n g t h e r e v i e w 4 4 . 4 4 . 9 P r e p a r a t i o n o f m t g . m i n u t e s 4 4 . 4 4 . 9 R e c o r d i n g o f d e c i s i o n o n l y 2 2 . 2 2 . 5 N o r e c o r d i n g o f r e v i e w 2 2 . 2 2 . 5 N o r e s p o n s e 3 3 . 3 3 . 7 T O T A L 9 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . A l m o s t t h r e e - q u a r t e r s o f t h e r e s p o n d e n t s i n d i c a t e d t h a t w r i t t e n : s u r n m a r i e s w e r e t h e m o s t f r e q u e n t l y u s e d m e a n s o f d o c u m e n t i n g t h e s e r e v i e w s f o l l o w e d b y w r i t t e n t r a n s c r i p t s o r t a p e r e c o r d i n g s o f t h e r e v i e w . O n l y o n e - t e n t h o f t h e r e s p o n d e n t s i n d i c a t e d t h a t l i m i t e d o r n o r e c o r d i n g o f t h e r e v i e w p r o c e s s o c c u r r e d i n t h e i r i n s t i t u t i o n s . T h e r e f o r e , r e p o r t i n g i n s t i t u t i o n s a r e m o r e l i k e l y t o m a i n t a i n a c o m p r e h e n s i v e r e c o r d o f t h e g r i e v a n c e r e v i e w p r o c e s s t h a n n o t . R e s p o n d e n t s w e r e p r o v i d e d w i t h t h r e e f o c i t o a t t e m p t t o d e t e r m i n e i f t h e r e w a s a p r i m a r y f o c u s o f 141 r e v i e w s r e l a t e d t o t h e a c a d e m i c c o m p o n e n t ( " v a l i d i t y o f o b s e r v a t i o n s m a d e b y t h e e v a l u a t o r " ) , t h e a d m i n i s t r a t i v e c o m p o n e n t ( " p r o c e d u r e s u s e d d u r i n g t h e e v a l u a t i o n " ) , o r t h e n a t u r a l j u s t i c e c o m p o n e n t ( " f a i r n e s s a n d r e a s o n a b l e n e s s o f e v a l u a t i o n " ) . T a b l e 2 2 s h o w s t h a t t h e r e w a s l i m i t e d v a r i a t i o n i n t h e d e g r e e t o w h i c h g r i e v a n c e r e v i e w p a n e l s f o c u s e d o n o n e o f t h e s e o p t i o n s o v e r t h e o t h e r . T a b l e 2 2 . - - G r i e v a n c e R e v i e w P a n e l s 1 ' F o c u s D u r i n g R e v i e w o f C l i n i c a l E v a l u a t i o n D e c i s i o n s P A N E L S 1 ' F O C U S N U M B E R * % O F % OF T O T A L P R O G R A M S F a i r n e s s a n d ' - r e a s o n a b l e n e s s o f e v a l u a t i o n 7 4 3 5 . 4 9 1 . 4 P r o c e d u r e s u s e d d u r i n g t h e e v a l u a t i o n 7 0 3 3 . 5 8 6 . 4 V a l i d i t y o f o b s e r v a t i o n s m a d e b y t h e e v a l u a t o r 6 2 2 9 . 7 7 6 . 5 N o r e s p o n s e 3 1 . 4 3 . 7 T O T A L 2 0 9 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . D u r i n g g r i e v a n c e r e v i e w s , t h e p a n e l s w e r e l i k e l y t o a d d r e s s w i t h f a i r l y e q u a l f r e q u e n c y t h e f a i r n e s s a n d r e a s o n a b l e n e s s o f t h e e v a l u a t i o n , t h e p r o c e d u r e s u s e d , 142 a n d t h e v a l i d i t y o f t h e o b s e r v a t i o n s m a d e b y t h e e v a l u a t o r . A n d m o s t p r o g r a m s f o c u s e d o n a l l t h r e e o f t h e o p t i o n s o f f e r e d . T a b l e 2 3 s h o w s t h e i n d i v i d u a l s w h o a r e i n t e r v i e w e d a t L e v e l I l l — A p p e a l H e a r i n g . A s i n g r i e v a n c e r e v i e w s , t h e g r i e v i n g s t u d e n t a n d h i s o r h e r c l i n i c a l i n s t r u c t o r ( s ) a r e t h e m o s t c o m m o n l y i n t e r v i e w e d i n d i v i d u a l s f o l l o w e d b y t h e h e a d o f t h e n u r s i n g p r o g r a m a n d t h e i n d i v i d u a l w h o c o n d u c t e d t h e g r i e v a n c e r e v i e w . T a b l e 2 3 . - - I n d i v i d u a l s I n t e r v i e w e d a t A p p e a l H e a r i n g s I N D I V I D U A L I N T E R V I E W E D N U M B E R * % O F % O F T O T A L P R O G R A M S G r i e v i n g s t u d e n t S t u d e n t ' s c l i n i c a l i n s t r u c t o r 6 4 2 9 . 6 7 9 . 0 6 0 2 7 . 8 7 4 . 1 H e a d o f t h e n u r s i n g p r o g r a m 4 2 1 9 . 4 5 1 . 9 I n d i v i d u a l ( s ) w h o c o n d u c t e d G r i e v a n c e R e v i e w 2 0 9 . 3 2 4 . 7 S t u d e n t ' s p e e r s 7 3 . 2 P e r s o n s i d e n t i f i e d b y A p p e a l H e a r i n g P a n e l 6 2 . 8 7 . 4 C h a i r p e r s o n o f p r o g r a m c t t e . 1 0 . 5 1 . 2 N o r e s p o n s e 1 6 7 . 4 1 9 . 8 T O T A L 2 1 6 1 0 0 . 0 * M u l t i p l e r e s p o n s e s i s r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 143 I n c o n t r a s t t o t h e g r i e v a n c e r e v i e w s , s e v e n o f t h e r e s p o n d e n t s r e p o r t e d t h a t t h e g r i e v i n g s t u d e n t ' s p e e r s w e r e i n t e r v i e w e d a n d a f u r t h e r s i x r e s p o n d e n t s s t a t e d t h a t t h e a p p e a l h e a r i n g p a n e l m i g h t i d e n t i f y a d d i t i o n a l i n d i v i d u a l s t o i n t e r v i e w . T h e s e m i g h t i n c l u d e o t h e r i n s t r u c t o r s , c l i n i c a l s u p e r v i s o r s , a n d o t h e r q u a l i f i e d p e r s o n s . I n o n l y f o u r o f t h e p r o g r a m s w e r e i n t e r v i e w s n o t c o n d u c t e d . T h i s l a t t e r g r o u p m i g h t h a v e a p p l i e d t h e f o r m a l d e f i n i t i o n o f a n a p p e a l , w h i c h r e s t r i c t s r e v i e w s t o d o c u m e n t a t i o n f r o m i n f o r m a l l e v e l s o f r e v i e w s a n d h e a r i n g s o f s t u d e n t c o m p l a i n t s . I n s u c h c a s e s , i n d i v i d u a l s w o u l d n o t b e i n t e r v i e w e d u n l e s s t h e y c o u l d p r o v i d e n e w e v i d e n c e w h i c h w a s n o t p r e s e n t e d a t p r e v i o u s h e a r i n g s . W h e n r e s p o n d e n t s w e r e a s k e d a b o u t t h e i n t e r v i e w p r o c e s s ( r e f e r t o T a b l e 2 4 ) t h e y r e p o r t e d e q u a l l y t h a t s t u d e n t s w e r e i n t e r v i e w e d i n t h e p r e s e n c e o f t h e i r c l i n i c a l i n s t r u c t o r s a n d a l o n e . A s i m i l a r d i v i s i o n o f p r a c t i c e , w a s o n t a i n e d f o r i n t e r v i e w o f t h e c l i n i c a l s u p e r v i s o r i n t h e p r e s e n c e o r a b s e n c e o f t h e s t u d e n t . T h e s i m i l a r i t y i n n u m b e r s o f r e s p o n s e s t o t h e o p t i o n s " i n t e r v i e w i n g . . . i n t h e p r e s e n c e o f " a n d 144 T a b l e 2 4 . - - A p p e a l H e a r i n g P r o c e d u r e s U s e d t o I n t e r v i e w P a r t i e s R e g a r d i n g t h e S t u d e n t ' s G r i e v a n c e P A R T I E S I N T E R V I E W E D N U M B E R * % O F % O F T O T A L P R O G R A M S I n t e r v i e w i n g t h e s t u d e n t i n p r e s e n c e o f c l i n i c a l i n s t r u c t o r 3 7 2 2 . 6 4 5 . 7 I n t e r v i e w i n g t h e s t u d e n t a l o n e 3 6 2 2 . 0 4 4 . 4 I n t e r v i e w i n g t h e c l i n i c a l i n s t - r u c t o r a l o n e 3 6 2 2 . 0 4 4 . 4 I n t e r v i e w i n g t h e c l i n i c a l i n s t - r u c t o r i n p r e s e n c e o f s t u d e n t 3 5 2 1 . 3 4 3 . 2 I n t e r v i e w i n g w i t n e s s e s i n t r o d u c e d b y s t u d e n t o r c l i n i c a l i n s t r u c t o r 3 1 . 8 3 . 7 I n t e r v i e w i n g h e a d o f t h e p r o g r a m 2 1 . 2 2 . 5 I n t e r v i e w i n g o t h e r i n s t r u c t o r s 1 0 . 6 1 . 2 I n t e r v i e w i n g c o o r d i n a t o r o f c o u r s e 1 0 . 6 1 . 2 N o r e s p o n s e 1 3 7 . 9 1 6 . 0 T O T A L 1 6 4 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . " i n t e r v i e w i n g . . . a l o n e " l e a d s t o s p e c u l a t i o n t h a t p r o g r a m s a r e a s l i k e l y t o i n t e r v i e w t h e s e p a r t i e s i n t h e p r e s e n c e o f e a c h o t h e r a s t o i n t e r v i e w t h e m a l o n e . A t t h e a p p e a l h e a r i n g l e v e l , i t a p p e a r s t h a t s t u d e n t s h a d a g r e a t e r c h a n c e o f b e i n g a l l o w e d a d v i s o r s t h a n n o t . T a b l e 2 5 c o m p a r e s t h e p r o v i s i o n f o r a n d r o l e o f a d v i s o r s f o r s t u d e n t s w i t h t h a t f o r c l i n i c a l i n s t r u c t o r s . I t i s i n t e r e s t i n g t o n o t e t h a t s t u d e n t s a r e g i v e n t h e o p p o r t u n i t y t o b e r e p r e s e n t e d b y a d v i s o r s m o r e f r e q u e n t l y t h a n a r e c l i n i c a l i n s t r u c t o r s . S t u d e n t s a r e a l s o m o r e l i k e l y t o b e a l l o w e d l a w y e r s a s a d v i s o r s t h a n a r e c l i n i c a l i n s t r u c t o r s . B o t h s t u d e n t s ' a n d c l i n i c a l i n s t r u c t o r s 1 ' a d v i s o r s a r e a s a p t t o b e a c t i v e p a r t i c i p a n t s i n a p p e a r h e a r i n g s a s t o a s s u m e p a s s i v e r o l e s . T a b l e 2 5 . - - U s e o f a n d R o l e o f A d v i s o r s f o r S t u d e n t s a n d C l i n i c a l I n s t r u c t o r s D u r i n g A p p e a l H e a r i n g s U S E O F / R O L E OF S T U D E N T C L I N I C A L I N S T R ' S A D V I S O R S N U M B E R * % O F % O F N U M B E R * % O F % O F T O T A L P R O G R A M T O T A L P R O G R A M I s a b l e t o b r i n g a d v i s o r 5 6 2 6 . . 3 6 9 . . 1 3 9 2 3 . . 8 4 8 , . 1 M a y b e l a w y e r 4 4 2 0 . . 7 5 4 . . 3 3 0 1 8 . . 3 3 7 , . 0 M a y n o t b e l a w y e r 3 2 1 5 . , 0 3 9 . . 5 1 1 6 . . 7 1 3 , . 6 A c t i v e p a r t i c i p a n t 2 1 9 . . 9 2 5 . . 9 1 5 9 . . 1 1 8 , . 5 O n l y p a s s i v e p a r t - 1 3 , i c i p a n t 1 3 6 . . 1 7 . . 4 1 1 6 . , 7 . 6 A c t i v e p a r t i c i p a n t 8 . 1 7 , i f r e q u e s t e d 2 0 9 . . 3 2 4 . . 7 1 4 . 5 . 3 N o r e s p o n s e 2 7 1 2 , . 7 3 3 . . 3 4 4 2 6 . . 9 3 7 , . 6 T O T A L 2 1 3 1 0 0 . 0 1 6 4 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 147 T a b l e 2 6 p r e s e n t s d a t a p e r t a i n i n g t o w h i c h i n d i v i d u a l s d e t e r m i n e w h i c h w i t n e s s e s a n d w h a t e v i d e n c e a r e t o b e h e a r d d u r i n g a p p e a l h e a r i n g s . H e a r i n g o f f i c e r s a r e m o r e l i k e l y t o d e t e r m i n e w h i c h w i t n e s s e s w i l l b e h e a r d f r o m d u r i n g a p p e a l h e a r i n g s w h i l e h e a r i n g p a n e l m e m b e r s a r e m o r e l i k e l y t o i d e n t i f y t h e e v i d e n c e w h i c h w i l l b e p r e s e n t e d . S t u d e n t s t e n d t o d e t e r m i n e t h e e v i d e n c e t o b e p r e s e n t e d m o r e f r e q u e n t l y t h a n t h e y d e t e r m i n e t h e w i t n e s s e s f o r t h e s e h e a r i n g s . C l i n i c a l i n s t r u c t o r s a n d h e a d s o f n u r s i n g p r o g r a m s a r e t h e n e x t m o s t f r e q u e n t p e r s o n s t o d e t e r m i n e b o t h w i t n e s s e s a n d e v i d e n c e t o b e h e a r d . A p p e a l h e a r i n g p a n e l s u t i l i z e w r i t t e n s u b m i s s i o n s ( r e f e r t o T a b l e 2 7 ) b y t h e a p p e a l i n g s t u d e n t , b y t h e c l i n i c a l i n s t r u c t o r ( s ) , t h e s t u d e n t ' s e v a l u a t i o n r e p o r t , a n e c d o t a l n o t e s a b o u t t h e s t u d e n t ' s c l i n i c a l p e r f o r m a n c e , a n d t h e s t u d e n t ' s w r i t t e n a s s i g n m e n t s f o r t h e c o u r s e w i t h s i m i l a r f r e q u e n c y . T h e y l e s s f r e q u e n t l y r e v i e w t h e s t u d e n t L s a c a d e m i c f i l e d u r i n g t h e s e h e a r i n g s . T a b l e 2 6 . - I n d i v i d u a l s D e t e r m i n i n g W i t n e s s e s o r E v i d e n c e A p p e a l H e a r i n g s t o b e H e a r d D u r i n g I N D I V I D U A L D E T E R M I N I N G W I T N E S S E S E V I D E N C E N U M B E R * % OF % O F N U M B E R * % O F % OF T O T A L P R O G R A M T O T A L P R O G R A M H e a r i n g O f f i c e r 2 3 2 4 . 2 2 8 . 4 3 1 2 0 . 4 3 8 . 3 H e a r i n g P a n e l 1 6 1 6 . 8 1 9 . 8 3 3 2 1 . 7 4 0 . 7 S t u d e n t 1 5 1 5 . 8 1 8 . 5 2 7 1 7 . 8 3 3 . 3 C l i n i c a l I n s t r u c t o r ( s ) 1 1 1 1 . 6 1 3 . 6 2 2 1 4 . 4 2 7 . 2 H e a d o f n u r s i n g p r o g r a m 1 1 1 1 . 6 1 3 . 6 2 2 1 4 . 4 2 7 . 2 C h a i r m a n o f c o m m i t t e e o r b o a r d 4 4 . 2 4 . 9 3 2 . 0 3 . 7 H e a d o f i n s t i t u t i o n 1 1 . 1 1 . 2 1 0 . 7 1 . 2 N o r e s p o n s e 1 4 1 4 . 7 1 7 . 3 1 3 8 . 6 1 6 . 0 T O T A L 9 5 1 0 0 . 0 1 5 2 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 4> 00 T a b l e 2 7 . - - D o c u m e n t a t i o n A s s e s s e d a t A p p e a l H e a r i n g s D O C U M E N T A T I O N N U M B E R * % OF % O F T O T A L P R O G R A M S W r i t t e n s u b m i s s i o n b y s t u d e n t 6 0 1 4 . 4 7 4 . 1 S t u d e n t ' s e v a l u a t i o n r e p o r t 5 6 1 3 . 3 6 9 . 1 W r i t t e n s u b m i s s i o n b y c l i n i c a l i n s t r u c t o r ( s ) 5 4 1 2 . 9 6 6 . 7 A n e c d o t a l n o t e s a b o u t s t u d e n t ' ' s c l i n i c a l p e r f o r m a n c e 5 0 1 1 . 9 6 1 . 7 S t u d e n t L s w r i t t e n a s s i g n m e n t s 4 7 1 1 . 2 5 8 . 0 S t u d e n t ' s p r e v i o u s e v a l u a t i o n s 4 0 9 . 5 4 9 . 4 S t u d e n t ' s e n t i r e f i l e 3 8 9 . 0 4 6 . 9 W r i t t e n s u b m i s s i o n b y h e a d o f n u r s i n g p r o g r a m 3 7 8 . 8 4 5 . 7 W r i t t e n s u b m i s s i o n b y s t u d e n t 1 ' s a d v i s o r 2 2 5 . 3 2 7 . 2 C o u n s e l l i n g r e c o r d s o f s t u d e n t 1 0 . 2 1 . 2 W r i t t e n s u b m i s s i o n b y h e a d o f c a m p u s 1 0 . 2 1 . 2 N o r e s p o n s e 1 4 3 . 3 1 7 . 3 T O T A L 4 2 0 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . T h e s e h e a r i n g s a r e g e n e r a l l y c l o s e d t o o u t s i d e o b s e r v e r s a s o u t l i n e d i n T a b l e 2 8 . I n o n l y o n e - t e n t h o f t h e p r o g r a m s c a n t h e h e a r i n g s b e o p e n e d t o t h e p u b l i c a t t h e s t u d e n t ' s r e q u e s t . W h e n a s k e d w h a t t h e f o c u s o f a p p e a l h e a r i n g s ' ' w a s w i t h i n t h e i r i n s t i t u t i o n ( r e f e r t o T a b l e 2 9 ) , t h e m a j o r i t y o f r e s p o n d e n t s i d e n t i f i e d d e t e r m i n i n g t h e 150 f a i r n e s s a n d r e a s o n a b l e n e s s o f e v a l u a t i o n o u t c o m e s , a n d p r o c e d u r e s u s e d d u r i n g c l i n i c a l e v a l u a t i o n s . S l i g h t l y T a b l e 2 8 . - - P u b l i c A c c e s s t o A p p e a l H e a r i n g s P U B L I C A C C E S S N U M B E R % O F T O T A L H e a r i n g c l o s e d t o p u b l i c 5 8 7 1 . 6 H e a r i n g n o r m a l l y c l o s e d , c a n b e o p e n w h e n r e q u e s t e d 8 9 . 9 H e a r i n g o p e n t o p u b l i c 0 0 . 0 H e a r i n g n o r m a l l y o p e n , c a n b e c l o s e d w h e n r e q u e s t e d o f s t u d e n t 0 0 . 0 N o r e s p o n s e 1 5 1 8 . 5 T O T A L 8 1 1 0 0 . 0 T a b l e 2 9 . - - A p p e a l H e a r i n g s ' F o c u s H E A R I N G F O C U S N U M B E R * % O F % O F T O T A L P R O G R A M S F a i r n e s s a n d r e a s o n a b l e n e s s o f o f e v a l u a t i o n o u t c o m e 6 4 3 5 . 4 7 9 . 0 P r o c e d u r e s u s e d d u r i n g e v a l u a t i o n e v a l u a t i o n 5 7 3 1 . 5 7 0 . 4 V a l i d i t y o f o b s e r v a t i o n s 4 8 2 6 . 5 5 9 . 3 N o r e s p o n s e 1 2 6 . 6 1 4 . 8 T O T A L 1 8 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 151 m o r e t h a n o n e - h a l f o f t h e p r o g r a m s ' - a p p e a l h e a r i n g s w e r e a l s o d i r e c t e d a t a s s e s s i n g t h e v a l i d i t y o f o b s e r v a t i o n s m a d e b y c l i n i c a l i n s t r u c t o r s . P a n e l s g e n e r a l l y r e v i e w e d t h e f a i r n e s s a n d r e a s o n a b l e n e s s o f t h e e v a l u a t i o n o u t c o m e a n d , t o a s l i g h t l y l e s s e r e x t e n t , t h e p r o c e d u r e s u s e d d u r i n g t h e e v a l u a t i o n . I f t h e r e w e r e n o f u r t h e r l e v e l s o f a p p e a l i n t h e i n s t i t u t i o n , t h e n t h e r e v i e w o f p r o c e d u r e s ( o r t h e a c a d e m i c d e c i s i o n - m a k i n g ) u s e d i n a r r i v i n g a t t h e e v a l u a t i v e d e c i s i o n h a d m o r e s i g n i f i c a n t w e i g h t i n g t h a n t h e s e d a t a s h o w . I f a n e x t e r n a l r e v i e w b y t h e c o u r t s o c c u r r e d , t h e c o u r t s w o u l d a s s e s s w h e t h e r t h e p r o c e d u r e s u s e d a n d t h e p o w e r e x e r c i s e d b y t h e i n s t i t u t i o n i n a r r i v i n g a t t h e d e c i s i o n a c c o r d e d w i t h b o t h t h e r u l e s o f n a t u r a l j u s t i c e a n d t h e s t a t u t e s w h i c h c o n t r o l t h e p o w e r s o f t h e i n s t i t u t i o n . T a b l e 30 o u t l i n e s t h e m e t h o d s u s e d b y a p p e a l h e a r i n g p a n e l s t o d o c u m e n t h e a r i n g p r o c e e d i n g s . W r i t t e n s u m m a r i e s w e r e m o r e c o m m o n l y u s e d t h a n w r i t t e n t r a n s c r i p t s , t a p e r e c o r d i n g s , o r m i n u t e s o f p r o c e e d i n g s . 152 T a b l e 3 0 . - - M e t h o d s o f D o c u m e n t i n g A p p e a l H e a r i n g s M E T H O D O F D O C U M E N T A T I O N N U M B E R * % O F % OF T O T A L P R O G R A M S W r i t t e n s u m m a r y o f h e a r i n g 5 6 5 6 . 0 6 9 . 1 W r i t t e n t r a n s c r i p t o f p r o c e e d i n g s 1 6 1 6 . 0 1 9 . 8 T a p e r e c o r d i n g o f p r o c e e d i n g s 1 3 1 3 . 0 1 6 . 0 M i n u t e s o f p r o c e e d i n g s 1 1 . 0 1 . 2 N o r e s p o n s e 1 4 1 4 . 0 1 7 . 3 T O T A L 1 0 0 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 81. A p p e a l h e a r i n g p a n e l s s h a r e w i t h g r i e v a n c e r e v i e w p a n e l s a s i m i l a r p a t t e r n o f p r e f e r e n c e s f o r t h e i r m e t h o d o f r e v i e w i n g t h e p r o c e e d i n g s . P r i m a r i l y t h e y u s e w r i t t e n s u m m a r i e s o f h e a r i n g s o v e r o t h e r f o r m s o f d o c u m e n t a t i o n f o l l o w e d b y w r i t t e n t r a n s c r i p t s a n d f i n a l l y t a p e r e c o r d i n g s o f t h e p r o c e e d i n g s . F i f t y - s e v e n r e s p o n d e n t s r e p o r t e d t h a t t h e a p p e a l h e a r i n g w a s t h e f i n a l l e v e l o f a p p e a l i n t h e i r i n s t i t u t i o n s , w h i l e t w e n t y - f o u r r e s p o n d e n t s i n d i c a t e d t h a t t h e r e w a s a f o u r t h l e v e l o f a p p e a l . A g a i n , a s i n t h e p r e v i o u s l e v e l o f r e v i e w , r e s p o n d e n t s w e r e a s k e d t o i d e n t i f y w h a t d o c u m e n t s w o u l d l i k e l y b e a s s e s s e d a t t h i s r e v i e w ( r e f e r t o T a b l e 3 1 ) . 153 The f o u r most f r e q u e n t l y i d e n t i f i e d forms o f d o c u m e n t a t i o n a t t h e i n s t i t u t i o n a l s t u d e n t a p p e a l h e a r i n g s were: w r i t t e n s u b m i s s i o n s by t h e a p p e a l i n g s t u d e n t and h i s or her c l i n i c a l i n s t r u c t o r ( s ) , t h e s t u d e n t ' s c l i n i c a l e v a l u a t i o n , and t h e a n e c d o t a l n o t e s a b o u t t h e s t u d e n t ' s c l i n i c a l p e r f o r m a n c e . T h i s i s a T a b l e 31.-* * Documents A s s e s s e d a t I n s t i t u t i o n a l S t u d e n t A p p e a l H e a r i n g s DOCUMENTS ASSESSED NUMBER* 1 OF % OF TOTAL PROGRAMS W r i t t e n s u b m i s s i o n s by s t u d e n t s 21 12 .1 25 .9 W r i t t e n s u b m i s s i o n s by c l i n i c a l i n s t r u c t o r s 20 11 .6 24 .7 S t u d e n t s ' c l i n i c a l e v a l u a t i o n r e p o r t s : 19 11 .0 23 .5 A n e c d o t a l n o t e s a b o u t s t u d e n t s ' p e r f o r m a n c e s 17 9 .8 21 .0 S t u d e n t s ' w r i t t e n a s s i g n m e n t s f o r c o u r s e s 14 8 .2 17 .3 W r i t t e n s u b m i s s i o n s by heads o f n u r s i n g programs S t u d e n t s e n t i r e f i l e s 13 7 .5 16 .0 12 6 .9 14 .8 No r e s p o n s e 57 32 .9 70 .4 TOTAL 173 100.0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . Number o f programs i s 81. s i m i l a r s e t o f documents as has b e e n p r e v i o u s l y i d e n t i f i e d a t t h e g r i e v a n c e r e v i e w s and a t t h e a p p e a l 154 h e a r i n g s . T h u s , i t a p p e a r s t h a t s i m i l a r s e t s o f d o c u m e n t s a r e a s s e s s e d a t a l l l e v e l s o f r e v i e w s c a r r i e d o u t i n i n s t i t u t i o n s . T a b l e 3 2 p r e s e n t s d a t a r e l a t e d t o t h e r e v i e w e r s ' f o c u s o n t h e a p p e a l i n g s t u d e n t ' s c l i n i c a l e v a l u a t i o n d e c i s i o n d u r i n g i n s t i t u t i o n a l s t u d e n t a p p e a l s . T a b l e 3 2 . - - I n s t i t u t i o n a l S t u d e n t A p p e a l P a n e l s ' F o c u s D u r i n g R e v i e w o f C l i n i c a l E v a l u a t i o n D e c i s i o n s P A N E L S ' " F O C U S N U M B E R * % OF % O F T O T A L P R O G R A M S F a i r n e s s a n d r e a s o n a b l e n e s s o f t h e e v a l u a t i o n o u t c o m e 2 7 2 3 . 3 3 3 . 3 P r o c e d u r e s u s e d d u r i n g e v a l u a - t i o n o f s t u d e n t 2 4 2 0 . 7 2 9 . 6 V a l i d i t y o f o b s e r v a t i o n s m a d e b y t h e e v a l u a t o r 1 6 1 3 . 8 1 9 . 8 F a i r n e s s o f a p p l i c a t i o n o f a p p e a l p r o c e d u r e s 1 0 . 8 1 . 2 N o r e s p o n s e 4 8 4 1 . 4 5 9 . 3 T O T A L 1 1 6 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 81. T h e m a j o r i t y o f r e s p o n d e n t s r e p o r t e d t h a t i n s t i t u t i o n a l s t u d e n t a p p e a l p a n e l s d i r e c t e d t h e i r 155 h e a r i n g s t o b o t h t h e " f a i r n e s s a n d r e a s o n a b l e n e s s o f t h e e v a l u a t i o n o u t c o m e " a n d t o " p r o c e d u r e s u s e d d u r i n g t h e e v a l u a t i o n o f t h e s t u d e n t . " H o w e v e r , a n u m b e r o f r e s p o n d e n t s a l s o s t a t e d t h a t t h e " v a l i d i t y o f t h e o b s e r v a t i o n s m a d e " w a s t h e f o c u s o f t h i s l e v e l o f a p p e a l . " V a l i d i t y o f t h e o b s e r v a t i o n s m a d e " r e f e r s t o t h e p r o f e s s i o n a l d e c i s i o n m a d e b y n u r s e s . A t t h i s l e v e l o f r e v i e w i t i s u n l i k e l y t h a t n u r s e s a r e m e m b e r s o f t h e s e p a n e l s . T h u s , p r o g r a m s f o c u s i n g o n t h i s a s p e c t o f t h e e v a l u a t i v e d e c i s i o n , c o u l d a l t e r t h e d e c i s i o n m a d e a b o u t t h e c o m p e t e n c e o f a s t u d e n t n u r s e t o p r o v i d e c a r e w i t h o u t t h e p r o f e s s i o n a l c o m p e t e n c e t o m a k e s u c h a n a s s e s s m e n t . A c o p y o f t h e a p p e a l h e a r i n g p a n e l ' s d e c i s i o n w e r e t h e m o s t f r e q u e n t f o r m o f d o c u m e n t a t i o n p l a c e d o n e a c h a p p e a l i n g s t u d e n t ' s f i l e ( r e f e r t o T a b l e 3 3 ) . T o a l e s s e r e x t e n t , s u m m a r i e s o f t h e f i n d i n g s w e r e p l a c e d t h e r e a n d r a r e l y w e r e c o p i e s o f t h e c o m p l e t e h e a r i n g p r o c e e d i n g s p l a c e d o n s u c h f i l e s . G i v e n t h a t o n l y a c o p y o f a n a p p e a l h e a r i n g d e c i s i o n w a s p l a c e d o n a p p e a l i n g s t u d e n t s ' f i l e s i n t h e m o s t f r e q u e n t c a s e , i f s t u d e n t s c h o s e t o f u r t h e r a p p e a l 156 t h e s e d e c i s i o n s , a l l t h e i n f o r m a t i o n r e l a t e d t o t h e c u r r e n t a n d p r e v i o u s r e v i e w s w o u l d b e c o n t a i n e d i n s e p a r a t e f i l e s . S u c h m a n a g e m e n t o f i n f o r m a t i o n c o u l d l e a d t o a l o s s o f s i g n i f i c a n t d a t a . T a b l e 3 3 . - - A p p e a l H e a r i n g D o c u m e n t a t i o n P l a c e d o n A p p e a l i n g S t u d e n t s 1 - F i l e s F O R M O F D O C U M E N T A T I O N N U M B E R * % O F % O F T O T A L P R O G R A M S C o p y o f h e a r i n g d e c i s i o n 4 5 4 8 . 9 5 5 . 6 S u m m a r y o f h e a r i n g p r o c e e d i n g s 2 2 2 3 . 9 2 7 . 2 C o p y o f h e a r i n g p r o c e e d i n g s 5 5 . 4 6 . 2 S e t o f r e c o m m e n d a t i o n s 1 1 . 1 1 . 2 N o r e s p o n s e 1 9 2 0 . 7 2 3 . 5 T O T A L 9 2 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . A t a l l l e v e l s o f r e v i e w , t h e g r i e v i n g o r a p p e a l i n g s t u d e n t w a s t h e m o s t l i k e l y i n d i v i d u a l t o b e i n t e r v i e w e d , f o l l o w e d b y t h e s t u d e n t L s c l i n i c a l i n s t r u c t o r s ( r e f e r t o T a b l e 3 4 ) . S t u d e n t s ' - p e e r s w e r e r a r e l y i n t e r v i e w e d b u t w e r e m o r e l i k e l y t o b e p r e s e n t a t f o r m a l a p p e a l h e a r i n g s t h a n a t i n f o r m a l g r i e v a n c e r e v i e w s . A s i m i l a r p a t t e r n w a s s e e n w i t h t h e a t t e n d a n c e o f n u r s i n g p r o g r a m h e a d s . 157 T a b l e 3 4 . - - S u m m a r y o f I n d i v i d u a l s I n t e r v i e w e d D u r i n g G r i e v a n c e R e v i e w s a n d A p p e a l H e a r i n g s I N D I V I D U A L ( S ) G R I E V A N C E R E V I E W A P P E A L H E A R I N G I N T E R V I E W E D N U M B E R * % O F % O F N U M B E R * % O F % O F T O T A L P R O G ' L M T O T A L P R O G ' M S t u d e n t 7 0 4 5 . 5 8 6 , . 4 6 4 3 1 . 8 7 9 . 0 C l i n i c a l i n s t r u c t o r 6 7 4 3 , . 5 8 2 , . 7 6 0 2 9 . 9 7 4 , . 1 C o o r d i n a t o r o f y e a r H e a d , n u r s i n g p r o g ' m 4 2 , . 6 4 , . 9 3 1 , . 9 3 , , 7 4 0 1 9 , . 9 4 9 , . 4 I n d i v i d u a l w h o c o n d u c t e d p r e v i o u s l e v e l o f r e v i e w 2 0 1 0 , . 0 2 4 . . 7 S t u d e n t p e e r s 1 0 , . 6 1 . , 2 7 3 , . 4 8 . , 6 O t h e r 9 5 . . 9 1 1 . , 1 1 0 5 , . 0 1 2 . , 3 T O T A L 1 5 4 1 0 0 . , 0 2 0 1 1 0 0 . , 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . T a b l e 3 5 p r e s e n t s a c o m p a r i s o n o f t h e d o c u m e n t s r e v i e w e d a t t h e t h r e e l e v e l s o f r e v i e w . P r o g r a m s g e n e r a l l y u t i l i z e d a w i d e v a r i e t y o f d o c u m e n t s t o g a i n s u f f i c i e n t i n f o r m a t i o n c o n c e r n i n g b o t h t h e s t u d e n t ' s p e r f o r m a n c e a n d t h e d a t a u s e d b y c l i n i c a l i n s t r u c t o r s t o a r r i v e a t t h e c l i n i c a l e v a l u a t i o n d e c i s i o n o f t h a t s t u d e n t . D u r i n g b o t h g r i e v a n c e r e v i e w s a n d a p p e a l h e a r i n g s s t u d e n t s c o u l d b e a c c o m p a n i e d b y a d v i s o r s m o r e f r e q u e n t l y t h a n c o u l d c l i n i c a l i n s t r u c t o r s ( r e f e r t o T a b l e 3 6 ) . A d v i s o r s f o r b o t h p a r t i e s w e r e m o r e l i k e l y T a b l e 3 5 . - D o c u m e n t s R e v i e w e d D u r i n g L e v e l s o f R e v i e w D O C U M E N T G R I E V A N C E R E V I E W A P P E A L H E A R I N G I N S T I T U T I O N A L S T U D E N T A P P E A L N U M B E R % O F % OF N U M B E R % O F % O F N U M B E R % O F % O F T O T A L P R O G ' M T O T A L P R O G L M T O T A L P R O G ' M W r i t t e n s u b m i s s i o n s b y S t u d e n t b y C l i n i c a l I n s t 7 8 7 8 1 8 1 8 . 0 . 0 9 6 9 6 . 3 . 3 6 0 5 4 1 5 1 4 . 8 . 2 7 4 6 6 . 1 . 7 2 1 2 0 1 8 1 7 . 1 . 2 2 5 2 4 . 9 . 7 S t u d e n t ' s c l i n i c a l E v a l u a t i o n 7 4 1 7 . 1 9 1 . 4 5 0 1 3 . 2 6 1 . 7 1 9 1 6 . 4 2 3 . 5 I n s t r u c t o r ' s a n e c d o t a l n o t e s 6 2 1 4 . 3 7 6 . 5 5 6 1 4 . 7 6 9 . 1 1 7 1 4 . 7 2 1 . 0 W r i t t e n a s s i g n m e n t f o r C o u r s e 5 3 1 2 . 2 6 5 . 4 4 7 1 2 . 4 5 8 . 0 1 4 1 2 . 1 1 7 . 3 S t u d e n t ' s p r e v i o u s e v a l u a t i o n s 4 3 9 . 9 5 3 . 1 4 6 1 2 . 1 5 6 . 8 S t u d e n t ' s a c a d e m i c f i l e 3 7 8 . 5 4 5 . 7 3 8 1 0 . 0 4 6 . 9 1 2 1 0 . 3 1 4 . 8 W r i t t e n s u b m i s s i o n b y h e a d , n u r s i n g p r o g r a m b y s t u d e n t ' s a d v i s o r 2 2 5 . 8 2 7 . 2 1 3 1 1 . 2 1 6 . 0 O t h e r 9 2 . 0 1 1 . 1 7 1 . 8 8 . 6 T O T A L 4 3 4 1 0 0 . 0 3 8 0 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s t o p l a y a n h e a r i n g s . 159 a c t i v e t h a n a p a s s i v e r o l e d u r i n g t h e s e T a b l e 3 6 . - - A v a i l a b i l i t y o f A d v i s o r s t o S t u d e n t s a n d C l i n i c a l I n s t r u c t o r s d u r i n g G r i e v a n c e R e v i e w A p p e a l H e a r i n g s A V A I L A B I L I T Y OR G R I E V A N C E R E V I E W A P P E A L H E A R I N G R O L E N U M B E R % O F % O F N U M B E R % O F % O F T O T A L P R O G ' M T O T A L P R O G ' M A C C E S S T O A D V I S O R : S t u d e n t m a y h a v e a d v i s o r 4 1 4 8 . 8 5 0 . 6 5 6 4 9 . 1 6 9 . 1 C l i n i c a l I n s t r u c t o r m a y h a v e a d v i s o r 3 1 3 6 . 9 3 8 . 3 3 9 3 4 . 2 4 8 . 1 N o r e s p o n s e 1 2 1 4 . 3 1 6 . 0 1 9 1 6 . 7 2 3 . 5 T O T A L 8 4 1 0 0 . 0 1 1 4 1 0 0 . 0 A D V I S O R M A Y B E L A W Y E R : S t u d e n t ' s a d v i s o r 2 3 2 7 . 1 2 8 . 4 4 4 3 5 . 8 5 4 . 3 C l i n i c a l I n s t r u c t o r ' s a d v i s o r 1 6 1 8 . 8 1 9 . 8 3 0 2 4 . 4 3 7 . 0 N o r e s p o n s e 4 6 5 4 . 1 5 6 . 8 4 9 6 0 . 5 6 0 . 5 T O T A L 8 5 1 0 0 . 0 1 2 3 1 0 0 . 0 A C T I V E P A R T I C I P A N T : S t u d e n t ' s a d v i s o r 1 1 1 6 . 9 1 3 . 6 2 1 2 9 . 2 2 5 . 9 C l i n i c a l I n s t r u c t o r ' s a d v i s o r 8 1 2 . 3 9 . 9 1 5 2 0 . 8 1 8 . 5 N o r e s p o n s e 4 6 7 0 . 8 5 6 . 8 3 6 5 0 . 0 4 4 . 4 T O T A L 6 5 1 0 0 . 0 7 2 1 0 0 . 0 160 T a b l e 3 6 . - - A v a i l a b i l i t y o f A d v i s o r s t o S t u d e n t s a n d C l i n i c a l I n s t r u c t o r s d u r i n g G r i e v a n c e R e v i e w A p p e a l H e a r i n g s ( C o n t i n u e d ) A V A I L A B I L I T Y OR G R I E V A N C E R E V I E W A P P E A L H E A R I N G R O L E N U M B E R % O F % O F N U M B E R % OF % OF T O T A L P R O G J M T O T A L P R O G ' M P A S S I V E P A R T I C I P A N T : S t u d e n t L s a d v i s o r 1 5 2 1 , . 7 1 8 , . 5 2 1 3 0 , . 9 2 5 , . 9 C l i n i c a l I n s t r u c t o r L s a d v i s o r 8 1 1 . . 6 9 , . 9 1 1 1 6 , . 2 1 3 , , 6 N o r e s p o n s e 4 6 6 6 , . 7 5 6 , . 8 3 6 5 2 , , 9 4 4 . , 4 T O T A L 6 9 1 0 0 . 0 6 8 1 0 0 . 0 A C T I V E P A R T I C I P A N T I F R E Q U E S T E D T O B E B Y P A N E L C H A I R P E R S O N : S t u d e n t ' s a d v i s o r 9 1 4 . 1 1 1 . 1 2 0 2 8 . 6 2 4 , . 7 C l i n i c a l I n s t r u c t o r x s a d v i s o r 9 1 4 . 1 1 1 . 1 1 4 2 0 . 0 1 7 , . 3 N o r e s p o n s e 4 6 7 1 . 9 5 6 . 8 3 6 5 1 . 4 4 4 , . 4 T O T A L 6 4 1 0 0 . 0 7 0 1 0 0 . 0 M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . O n l y a p o r t i o n o f t h e t o t a l r e s p o n s e i s r e p o r t e d . N u m b e r o f p r o g r a m s i s 8 1 . D u r i n g t h e i n f o r m a l a n d f o r m a l l e v e l s o f r e v i e w p a n e l m e m b e r s d i r e c t e d t h e i r a s s e s s m e n t t o a l l t h r e e o f t h e f o c i . T h e r e w a s a s l i g h t l y l e s s e m p h a s i s o n t h e " v a l i d i t y o f o b s e r v a t i o n s m a d e " i n t h e f o r m a l r e v i e w s t h a n s e e n i n t h e i n f o r m a l r e v i e w s ( r e f e r t o T a b l e 3 7 ) . T a b l e 3 7 . - - R e v i e w e r s F o c u s o f D e c i s i o n A p p r a i s a l a t T h r e e L e v e l s o f R e v i e w F O C U S O F D E C I S I O N G R I E V A N C E R E V I E W " A P P E A L H E A R I N G I N S T I T U T I O N A L S T U D E N T A P P E A L N U M B E R * % OF % OF N U M B E R * % O F % O F N U M B E R * % O F % O F T O T A L P R O G R A M T O T A L P R O G R A M T O T A L P R O G R A M F a i r n e s s / r e a s o n - a b l e n e s s o f d e c i s i o n 7 4 P r o c e d u r e s u s e d 7 0 V a l i d i t y o f o b s e r - v a t i o n s m a d e 6 2 N o r e s p o n s e 3 3 5 . 4 3 3 . 5 9 1 . 4 8 6 . 4 2 9 . 7 7 6 . 5 1 . 4 3 . 7 6 4 5 7 4 8 1 2 3 5 . 4 3 1 . 5 2 6 . 5 6 . 6 7 9 . 0 7 0 . 4 5 9 . 3 1 4 . 8 2 7 2 4 1 6 4 8 2 3 2 0 1 3 4 1 3 3 . 3 2 9 . 6 1 9 . 8 5 9 . 3 T O T A L 2 0 9 1 0 0 . 0 1 8 1 1 0 0 . 0 1 1 5 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . T a b l e 3 8 . - - F o r m o f D o c u m e n t a t i o n o f L e v e l s o f R e v i e w F O R M O F D O C U M E N T A - T I O N G R I E V A N C E R E V I E W A P P E A L H E A R I N G I N S T I T U T I O N A L S T U D E N T A P P E A L N U M B E R * % OF % OF. N U M B E R * % O F % O F N U M B E R * % O F % O F T O T A L P R O G R A M T O T A L P R O G R A M T O T A L P R O G R A M W r i t t e n S u m m a r y o f P r o c e e d i n g s W r i t t e n T r a n s c r i p t o f P r o c e e d i n g s T a p e R e c o r d i n g o f P r o c e e d i n g s O t h e r N o r e s p o n s e 6 6 7 5 . 9 8 1 . 5 5 5 5 4 . 5 6 7 . 9 2 7 2 9 . 7 3 3 . 3 1 0 1 1 . 6 1 2 . 3 1 6 1 5 . 8 1 9 . 8 9 9 . 9 1 1 . 1 5 5 . 7 6 . 2 1 3 1 2 . 9 1 6 . 0 5 5 . 5 6 . 2 3 3 . 4 3 . 7 3 3 . 0 3 . 7 2 2 . 2 2 . 5 3 3 . 4 3 . 7 1 4 1 3 . 8 1 7 . 3 4 8 5 2 . 7 5 9 . 3 8 7 ' 1 0 0 . 0 1 0 1 1 0 0 . 0 9 1 1 0 0 . 0 T O T A L M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 ON 163 D o c u m e n t a t i o n o f b o t h i n f o r m a l a n d f o r m a l h e a r i n g s w a s m o s t o f t e n i n t h e f o r m o f a w r i t t e n s u m m a r y o f t h e p r o c e e d i n g s f o l l o w e d b y w r i t t e n t r a n s c r i p t s a n d t a p e r e c o r d i n g s ( r e f e r t o T a b l e 3 8 ) . C o n t r o l s o n t h e d e c i s i o n - m a k e r . D a t a r e l a t i n g t o c o n t r o l s w e r e i n t e n d e d t o d e t e r m i n e t h e a u t h o r i t y d e l e g a t e d t o t h e h e a r i n g o f f i c e r o r p a n e l i n e i t h e r a f o r m a l o r i n f o r m a l l e v e l o f a p p e a l . G e n e r a l l y t h e d e c i s i o n - m a k i n g p o w e r s d e l e g a t e d w o u l d b e o n e o f t h e f o l l o w i n g : ( a ) t o p r e p a r e a s u m m a r y o f t h e f i n d i n g s , ( b ) t o p r o v i d e r e c o m m e n d a t i o n s r e g a r d i n g t h e f i n d i n g s , o r ( c ) t o m a k e a f i n a l d e c i s i o n a b o u t w h e t h e r t h e e v a l u a t i v e d e c i s i o n s h o u l d b e u p h e l d , o v e r t u r n e d , o r m o d i f i e d . I n f o r m a t i o n w a s a l s o s o l i c i t e d a s t o w h o m t h e o u t c o m e w a s r e p o r t e d w i t h i n t h e i n s t i t u t i o n . A t L e v e l I , ( i n i t i a l r e v i e w o f e v a l u a t i o n d e c i s i o n s ) r e v i e w s v a r i e d w i d e l y a s t o w h o a s s e s s e d s t u d e n t s ' " c l i n i c a l e v a l u a t i o n d e c i s i o n s . T a b l e 3 9 i d e n t i f i e s t h e i n d i v i d u a l s o r g r o u p s c i t e d b y r e s p o n d e n t s . O n l y a r e l a t i v e l y s m a l l n u m b e r o f r e s p o n d e n t s p r o v i d e d d a t a c o n c e r n i n g t h e p r o v i s i o n o f s t u d e n t 164 e v a l u a t i o n r e v i e w p r o c e s s e s o u t s i d e o f t h e n u r s i n g p r o g r a m s . D a t a p r o v i d e d f r o m r e s p o n d e n t s i d e n t i f i e d t h e d i r e c t o r o f t h e n u r s i n g p r o g r a m a s t h e i n d i v i d u a l m o s t l i k e l y t o c o n d u c t s u c h r e v i e w s f o l l o w e d b y a n i n s t i t u t i o n a l c o m m i t t e e , t h e d e a n o f t h e d i v i s i o n , a n d f i n a l l y a r e v i e w p a n e l . I t a p p e a r s f r o m t h e a b o v e d a t a T a b l e 3 9 . - - L e v e l I , I n i t i a l R e v i e w o f S t u d e n t s 1 ' C l i n i c a l P e r f o r m a n c e D e c i s i o n s R E V I E W E R N U M B E R * % O F % O F T O T A L P R O G R A M S D i r e c t o r o f P r o g r a m , o r s c h o o l 1 1 1 2 . . 4 1 3 , . 6 I n s t i t u t i o n a l c o m m i t t e e 8 9 , .0 9 , . 9 D e a n o f D i v i s i o n , S c h o o l / f a c u l t y 5 5 , . 6 6 , . 2 R e v i e w P a n e l 2 2 . . 2 2 . . 5 N o r e s p o n s e : 6 3 70. . 8 77 . . 8 T O T A L 8 9 100. .0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 81 . t h a t r e v i e w o f n u r s i n g f a c u l t y d e c i s i o n s r e g a r d i n g s t u d e n t s 1 c l i n i c a l e v a l u a t i o n i s n o t a c o m m o n p r a c t i c e t h r o u g h o u t C a n a d a . A t t h e n e x t l e v e l , t h e g r i e v a n c e r e v i e w p a n e l , m e m b e r s w e r e m o r e l i k e l y t o m a k e a f i n a l d e c i s i o n t h a n 165 e i t h e r a s u m m a r y o f f i n d i n g s o r a s e t o f r e c o m m e n d a t i o n s ( r e f e r t o T a b l e 4 0 ) . C o n s e q u e n t l y , a t L e v e l I I , t h e r e v i e w p a n e l w a s g e n e r a l l y g i v e n t h e a u t h o r i t y t o m a k e a f i n a l d e c i s i o n i n a g r i e v a n c e r e v i e w . T h u s , o n c e r e v i e w p a n e l s r e a c h e d t h e i r d e c i s i o n , t h e o u t c o m e s w e r e r e p o r t e d t o t h e f o l l o w i n g i n d i v i d u a l s , i n d e s c e n d i n g o r d e r : a p p e a l i n g s t u d e n t s , i n v o l v e d c l i n i c a l i n s t r u c t o r s , h e a d s o f t h e n u r s i n g T a b l e 4 0 . - - D e c i s i o n - M a k i n g A u t h o r i t y o f G r i e v a n c e R e v i e w P a n e l s D E C I S I O N - M A K I N G A U T H O R I T Y N U M B E R % O F T O T A L T o m a k e a f i n a l d e c i s i o n 5 2 6 4 . 2 T o m a k e r e c o m m e n d a t i o n s 2 1 2 5 . 9 T o m a k e a s u m m a r y o f f i n d i n g s 2 2 . 5 N o r e s p o n s e 6 7 . 4 T O T A L 8 1 1 0 0 . 0 p r o g r a m s , d e a n s o f t h e d i v i s i o n s , s c h o o l s , o r f a c u l t i e s , r e g i s t r a r s o f t h e i n s t i t u t i o n s , n u r s i n g p r o g r a m s 1 s t a n d i n g c o m m i t t e e s , a n d h e a d s o f t h e i n s t i t u t i o n s . 166 O n c e g r i e v a n c e r e v i e w s w e r e c o n c l u d e d , o u t c o m e s w e r e r e p o r t e d m o s t c o n s i s t e n t l y ( a s s h o w n i n T a b l e 4 1 ) t o b o t h s t u d e n t s a n d t h e i r c l i n i c a l i n s t r u c t o r . T a b l e 4 1 . - - P a r t i e s t o W h o m O u t c o m e s o f G r i e v a n c e R e v i e w s a r e R e p o r t e d P A R T I E S O U T C O M E S R E P O R T E D T O N U M B E R * % O F % O F T O T A L P R O G R A M S S t u d e n t 6 8 2 6 . 6 8 4 . 0 S t u d e n t L s c l i n i c a l i n s t r u c t o r 5 8 2 2 . 7 7 1 . 6 H e a d o f n u r s i n g p r o g r a m 4 9 1 9 . 1 6 0 . 5 D e a n o f d i v i s i o n , s c h o o l o r f a c u l t y 2 9 1 1 . 3 3 5 . 8 R e g i s t r a r o f i n s t i t u t i o n 2 0 7 . 8 2 4 . 7 N u r s i n g p r o g r a m s t a n d i n g c o m m i t t e e 1 2 4 . 6 1 4 . 8 H e a d o f i n s t i t u t i o n 8 3 . 1 9 . 9 N u r s i n g p r o g r a m f a c u l t y 4 1 . 6 4 . 9 C o o r d i n a t o r o f y e a r 3 1 . 2 3 . 7 C h a i r m a n B o a r d o f T r u s t e e s 1 0 . 4 1 . 2 S e n a t e 1 0 . 4 1 . 2 N o r e s p o n s e 3 1 . 2 3 . 7 T O T A L 2 5 6 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 81. A s i n g r i e v a n c e r e v i e w s , o u t c o m e s o f a p p e a l h e a r i n g s a t L e v e l I I I w e r e g e n e r a l l y i n t h e f o r m o f f i n a l d e c i s i o n s ( r e f e r t o T a b l e 4 2 ) . 167 T a b l e 4 2 . - - D e c i s i o n - M a k i n g A u t h o r i t y o f A p p e a l H e a r i n g P a n e l s D E C I S I O N - M A K I N G A U T H O R I T Y N U M B E R % OF T O T A L T o m a k e a f i n a l d e c i s i o n 5 3 6 5 . 5 T o m a k e r e c o m m e n d a t i o n s 1 2 1 4 . 8 T o m a k e a s u m m a r y o f f i n d i n g s 4 4 . 9 N o r e s p o n s e 1 2 1 4 . 8 T O T A L 8 1 1 0 0 . 0 T a b l e 4 3 f u r t h e r c l a r i f i e s w h a t c o n s t i t u t e d a " d e c i s i o n " f o r t h e s e a p p e a l h e a r i n g p a n e l s a c c o r d i n g t o t h e r e s p o n d e n t s . T a b l e 4 3 . - - T y p e o f D e c i s i o n s M a d e b y A p p e a l H e a r i n g P a n e l s T Y P E O F D E C I S I O N N U M B E R % O F T O T A L T o c h a n g e a s t u d e n t s ' " c l i n i c a l e v a l u a t i o n m a r k 2 6 3 2 . 1 T o o n l y m a k e a d e c i s i o n a s t o t h e f a i r n e s s o r r e a s o n a b l e n e s s o f t h e c l i n i c a l e v a l u a t i o n 1 9 2 3 . 5 T o o n l y m a k e r e c o m m e n d a t i o n s f o r t h e n u r s i n g f a c u l t y t o c o n s i d e r 4 4 . 9 T o u p h o l d o r n o t u p h o l d t h e n u r s i n g f a c u l t y ' s d e c i s i o n 2 2 . 5 N o r e s p o n s e 3 0 3 7 . 0 T O T A L 8 1 1 0 0 . 0 168 Thus, more than one-third of appeal hearing panels responding were empowered to alter students'- c l i n i c a l evaluation decisions. However, in s l i g h t l y more than one-quarter of the other responding programs panels had only recommending power. Therefore, in the responding i n s t i t u t i o n s , the appeal hearing panels were more l i k e l y to have the power to uphold or modify a student's c l i n i c a l evaluation decision and to a lesser extent to have only the power to recommend actions to be considered by the nursing faculty. Table 44 outlines who is directed to report the outcome of an appeal hearing and to whom the outcome is reported. Thus the individuals most l i k e l y to receive a report about the outcome of an appeal hearing were the student involved and the head of the nursing program. The next most frequently selected individuals were the c l i n i c a l i n s t r u c t o r ( s ) , the dean of a d i v i s i o n , school, or faculty, and the regist r a r of the i n s t i t u t i o n . From the options provided, the least l i k e l y individual to receive this report was the head of the i n s t i t u t i o n . 169 T a b l e 4 4 . - - P a r t i e s R e s p o n s i b l e f o r R e p o r t i n g O u t c o m e o f A p p e a l H e a r i n g s a n d t o W h o m T h e y R e p o r t O u t c o m e P A R T I E S O U T C O M E R E P O R T E D O U T C O M E R E C E I V E D R E S P O N S I B L E F O R T O B Y R E P O R T I N G A N D N U M B E R % O F N U M B E R * % O F % O F R E C E I V I N G O U T C O M E T O T A L T O T A L P R O G R A M S P a n e l c h a i r p e r s o n 3 1 3 8 . 3 H e a r i n g O f f i c e r 8 9 , . 9 H e a d o f I n s t i t u t i o n 7 8 , . 6 2 1 9 , . 1 2 5 , . 9 I m m e d i a t e s u p e r v i s o r n u r s i n g h e a d 2 2 . . 5 H e a d n u r s i n g p r o g r a m 6 7 , . 4 5 4 2 3 , . 5 6 6 , . 7 R e g i s t r a r 5 6 . . 2 2 5 1 0 , . 9 3 1 , . 0 D e a n d i v i s i o n , s c h o o l 2 2 , . 5 2 6 1 1 , . 3 3 2 , . 1 C h a i r p e r s o n o f b o a r d 1 1 . . 2 2 0 , . 9 2 , . 5 C h a i r p e r s o n o f S e n a t e 1 1 , . 2 1 0 , , 4 1 , . 2 O t h e r a d m i n i s t r a t i v e p o s i t i o n 2 2 . , 5 A p p e a l i n g s t u d e n t 5 7 2 4 . ,8 7 0 . , 4 C l i n i c a l i n s t r u c t o r s ) 3 1 1 3 . , 5 3 8 . . 3 N o r e s p o n s e 1 6 1 9 , . 7 1 3 5 . . 6 1 6 . . 0 T O T A L 8 1 1 0 0 . 0 2 3 0 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . S t u d e n t s r e c e i v e d h e a r i n g o u t c o m e s m o s t f r e q u e n t l y f r o m t h e c h a i r p e r s o n s o f a p p e a l h e a r i n g p a n e l s . O t h e r i n d i v i d u a l s w h o m i g h t c o m m u n i c a t e s u c h d e c i s i o n s t o s t u d e n t s i n c l u d e d : h e a r i n g o f f i c e r s , h e a d s o f t h e i n s t i t u t i o n s , a n d i m m e d i a t e s u p e r v i s o r s o f h e a d s o f n u r s i n g p r o g r a m s . 1 7 0 S t u d e n t s w h o r e m a i n e d d i s s a t i s f i e d w i t h t h e o u t c o m e s o f a p p e a l h e a r i n g s c o u l d d e m a n d i n s t i t u t i o n a l s t u d e n t a p p e a l s i n 3 6 o f t h e 8 1 p r o g r a m s r e s p o n d i n g t o t h i s s u r v e y . T a b l e 4 5 o u t l i n e s t h e d o c u m e n t a t i o n u s e d a t t h i s l e v e l o f r e v i e w i n t h e p r o g r a m s r e s p o n d i n g . T a b l e 4 5 . - - D o c u m e n t a t i o n R e v i e w e d D u r i n g I n s t i t u t i o n a l S t u d e n t A p p e a l s D O C U M E N T S R E V I E W E D N U M B E R * % O F % O F T O T A L P R O G R A M S W r i t t e n b y a p p e a l i n g s t u d e n t 2 1 1 1 . 6 2 5 . 9 W r i t t e n b y c l i n i c a l i n s t r u c t o r ( s ) S t u d e n t ' s e v a l u a t i o n r e p o r t 2 0 1 1 . 0 2 4 . 7 1 9 1 0 . 5 2 3 . 5 A n e c d o t a l n o t e s a b o u t s t u d e n t ' s c l i n i c a l p e r f o r m a n c e 1 7 9 . 4 2 1 . 0 S t u d e n t ' s w r i t t e n a s s i g n m e n t s f o r c o u r s e 1 4 7 . 7 1 7 . 3 Written s u b m i s s i o n b y head o f nursing p r o g r a m 1 3 7 . 2 1 6 . 0 StudentLs ent i re f i l e 1 2 6 . 7 1 4 . 8 T r a n s c r i p t s / s u m m a r i e s o f p r e v i o u s l e v e l s o f r e v i e w 8 4 . 4 9 . 9 N o r e s p o n s e 5 7 3 1 . 5 7 0 . 4 T O T A L 1 8 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 171 I n s t i t u t i o n s w h i c h r e s t r i c t e d t h e r e v i e w o f d o c u m e n t a t i o n t o t h e t r a n s c r i p t s a n d s u m m a r i e s o f p r e v i o u s l e v e l s o f r e v i e w s o r a p p e a l s w e r e u s u a l l y a p p l y i n g t h e p u r e l e g a l m e a n i n g o f a n " a p p e a l . " I n t h i s c o n t e x t , o n l y t h e p r o c e d u r e s u s e d t o a r r i v e a t t h e e v a l u a t i v e d e c i s i o n w e r e a s s e s s e d t o e n s u r e t h a t t h e a p p e a l i n g s t u d e n t r e c e i v e d h i s o r h e r " n a t u r a l j u s t i c e " o r " d u e p r o c e s s . " T h e o u t c o m e o f s u c h a n a p p e a l t h e n r e s t e d w i t h t h e p r o c e s s e s u s e d r a t h e r t h a n w i t h t h e c o n t e n t o f t h e c l i n i c a l a p p r a i s a l o f t h e s t u d e n t ' s p e r f o r m a n c e . L e v e l I V - - I n s t i t u t i o n a l S t u d e n t A p p e a l r e v i e w o u t c o m e s w e r e r e p o r t e d b y r e s p o n d e n t s m o s t f r e q u e n t l y a s d e c i s i o n s ( r e f e r t o T a b l e 4 6 ) f o l l o w e d b y r e p o r t i n g t h e s e o u t c o m e s a s r e c o m m e n d a t i o n s . W h e n a s k e d w h a t c o n s t i t u t e d a " d e c i s i o n " i t a p p e a r s f r o m t h e d a t a t h a t i t i s m o r e l i k e l y t h a t p a n e l s e i t h e r m a k e a d e c i s i o n r e l a t e d t o t h e f a i r n e s s o r r e a s o n a b l e n e s s o f t h e s t u d e n t ' s c l i n i c a l e v a l u a t i o n o r c h a n g e t h e s t u d e n t ' s c l i n i c a l m a r k ( r e f e r t o T a b l e 4 7 ) . 172 T a b l e 4 6 . - - D e c i s i o n - M a k i n g A u t h o r i t y o f I n s t i t u t i o n a l S t u d e n t A p p e a l P a n e l s D E C I S I O N - M A K I N G A U T H O R I T Y N U M B E R * % O F % O F T O T A L P R O G R A M S T o m a k e a f i n a l d e c i s i o n T o m a k e r e c o m m e n d a t i o n s T o m a k e a d e c i s i o n a n d a s u m m a r y o f f i n d i n g s T o m a k e a s u m m a r y o f t h e f i n d i n g s N o r e s p o n s e 2 3 2 9 . 5 2 8 . 4 5 6 . 4 6 . 2 2 2 . 6 2 . 4 0 0 . 0 0 . 0 4 8 6 1 . 5 6 3 . 0 T O T A L * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d , i s 8 1 . 7 8 1 0 0 . 0 N u m b e r o f p r o g r a m s T a b l e 4 7 . - - T y p e o f D e c i s i o n s M a d e b y S t u d e n t A p p e a l P a n e l s I n s t i t u t i o n a l T Y P E O F D E C I S I O N N U M B E R % OF T O T A L O n l y m a k e a d e c i s i o n a s t o t h e f a i r n e s s o r r e a s o n a b l e n e s s o f t h e c l i n i c a l e v a l u a t i o n C h a n g e a s t u d e n t ' s c l i n i c a l m a r k M a k e r e c o m m e n d a t i o n s a b o u t a p p r o p - r i a t e a c t i o n t o t a k e h e a d o f i n s t i t u t i o n O n l y m a k e r e c o m m e n d a t i o n s f o r t h e n u r s i n g f a c u l t y t o c o n s i d e r N o r e s p o n s e 9 9 1 1 . 1 1 1 . 1 6 . 2 3 . 7 6 7 . 9 T O T A L 8 1 1 0 0 . 0 O n c e i n s t i t u t i o n a l s t u d e n t a p p e a l p a n e l s m a d e t h e i r d e c i s i o n s , t h e m o s t f r e q u e n t l y c i t e d i n d i v i d u a l 173 t h e y r e p o r t e d t h e i r d e c i s i o n t o ( r e f e r t o T a b l e 4 8 ) w a s t h e h e a d o f t h e i n s t i t u t i o n , f o l l o w e d b y t h e S e n a t e o f a n i n s t i t u t i o n . T h e d e c i s i o n w a s a l s o c o n v e y e d t o t h e h e a d o f t h e n u r s i n g p r o g r a m , w h o i n t u r n , i n f o r m e d t h e a p p e a l i n g s t u d e n t , o r t h e s t u d e n t r e c e i v e d t h i s i n f o r m a t i o n f r o m t h e r e g i s t r a r . T a b l e 4 8 . - - P e r s o n s R e c e i v i n g O u t c o m e o f I n s t i t u t i o n a l S t u d e n t A p p e a l P E R S O N S R E C E I V I N G O U T C O M E N U M B E R % O F T O T A L H e a d o f i n s t i t u t i o n 1 1 1 3 . 6 S e n a t e o f i n s t i t u t i o n 7 8 . 6 H e a d o f n u r s i n g p r o g r a m 4 4 . 9 A n o t h e r a d m i n i s t r a t i v e p e r s o n i n t h e i n s t i t u t i o n 3 3 . 7 A p p e a l i n g s t u d e n t 3 3 . 7 B o a r d o f G o v e r n o r s . 2 2 . 5 I n s t i t u t i o n a l : c o m m i t t e e 1 1 . 2 R e g i s t r a r 1 1 . 2 B o a r d o f T r u s t e e s 0 0 . 0 N o r e s p o n s e 4 9 6 0 . 6 T O T A L 8 1 1 0 0 . 0 A t a l l l e v e l s o f r e v i e w s o r h e a r i n g s ( r e f e r t o T a b l e 4 9 ) , t w o - t h i r d s o f t h e r e s p o n d e n t s r e p o r t e d t h a t t h o s e w h o w e r e c h a r g e d t o c o n d u c t t h e s e h e a r i n g s h a d f i n a l d e c i s i o n - m a k i n g p o w e r s . L e s s t h a n o n e - q u a r t e r o f 174 t h e p r o g r a m s r e s t r i c t e d s u c h p o w e r t o r e c o m m e n d a t i o n s o n l y . T a b l e 4 9 . - - D e c i s i o n - m a k i n g P o w e r T h r e e L e v e l s o f R e v i e w o f P a n e l s a t D E C I S I O N - M A K I N G P O W E R O F P A N E L S G R I E V A N C E R E V I E W N U M B E R % A P P E A L H E A R I N G N U M B E R * % I N S T I T U T 1 L S T U D E N T A P P E A L N U M B E R % M a k e f i n a l d e c i s i o n 5 1 6 3 . 0 5 1 6 3 . 0 2 3 2 8 . 4 P r o v i d e r e c o m m e n d a t i o n s r e g a r d i n g f i n d i n g s 1 8 2 2 . 2 9 1 1 . 1 4 4 . 9 P r e p a r e a s u m m a r y o f t h e f i n d i n g s 2 2 . 5 2 2 . 5 0 0 . 0 N o r e s p o n s e 1 0 1 2 . 3 1 9 2 3 . 4 5 4 6 6 . 7 T O T A L 8 1 1 0 0 . 0 8 1 1 0 0 . 0 8 1 1 0 0 . 0 O n c e t h e d e c i s i o n w a s r e a c h e d a t e a c h l e v e l o f r e v i e w o r a p p e a l i t w a s r e p o r t e d i n t u r n t o a h i g h e r l e v e l i n t h e i n s t i t u t i o n ( r e f e r t o T a b l e 5 0 ) . S t u d e n t s ' - r o u t e t o q u e s t i o n d e c i s i o n s : I n t h r e e o f t h e f i v e s e c t i o n s o f t h e q u e s t i o n n a i r e r e s p o n d e n t s w e r e a s k e d w h e t h e r t h e i r p r o g r a m s 1 - s t u d e n t s w e r e g i v e n a n o p p o r t u n i t y t o q u e s t i o n d e c i s i o n s m a d e r e g a r d i n g t h e i r c l i n i c a l p e r f o r m a n c e . H o w e v e r , d u e t o a n e r r o r i n d i r e c t i n g r e s p o n d e n t s i n t h e c o m p l e t i o n o f t h e q u e s t i o n n a i r e , r e s p o n d e n t s a n s w e r i n g a n e a r l i e r T a b l e 5 0 . - - P e r s o n s t o W h o m O u t c o m e s a r e R e p o r t e d f o r T h r e e L e v e l s o f R e v i e w s I N D I V I D U A L D E C I S I O N G R I E V A N C E R E V I E W A P P E A L H E A R I N G I N S T I T ' L S T U D E N T R E P O R T E D T O A P P E A L N U M B E R * % O F % OF N U M B E R * % O F % OF N U M B E R % OF T O T A L P R O G ' M T O T A L P R O G ' M T O T A L S t u d e n t 6 8 2 7 . 3 8 4 . 0 5 7 2 4 . 8 7 0 . 4 3 3 . 7 C l i n i c a l i n s t r u c t o r s 5 8 2 3 . 3 7 1 . 6 3 1 1 3 . 5 3 8 . 3 N u r s i n g P r o g r a m H e a d 4 9 1 9 . 7 6 0 . 5 5 4 2 3 . 5 6 6 . 7 4 4 . 9 D e a n , D i v i s i o n , S c h o o l 2 9 1 1 . 6 3 5 . 8 2 6 1 1 . 3 3 2 . 1 R e g i s t r a r 2 0 8 . 0 2 4 . 7 2 5 1 0 . 9 3 1 . 0 1 1 . 2 N u r s i n g P r o g r a m C t t e . 1 2 4 . 9 1 4 . 8 1 3 . 6 H e a d o f I n s t i t u t i o n 8 3 . 2 9 . 9 2 1 9 . 1 2 5 . 9 1 1 S e n a t e o f i n s t i t u t i o n 1 0 . 4 1 . 2 1 0 . 4 1 . 2 7 8 . 6 B o a r d o f G o v e r n o r s 1 • 0 . 4 1 . 2 2 0 . 8 2 . 5 2 2 . 5 N o r e s p o n s e 3 1 . 2 3 . 7 1 3 5 . 7 1 6 . 0 5 3 6 5 . 5 T O T A L 2 4 9 1 0 0 . 0 2 3 0 1 0 0 . 0 8 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 176 q u e s t i o n were d i r e c t e d t o s k i p t o a new s e c t i o n , t h u s b y p a s s i n g t h e q u e s t i o n s e e k i n g t h i s i n f o r m a t i o n a t L e v e l I . T h e r e f o r e , o n l y 25 r e s p o n d e n t s o f a p o p u l a t i o n o f 81 p r o v i d e d d a t a . T h u s , d a t a c a n n o t be c o n s i d e r e d v a l i d due t o t h e above n o t e d e r r o r . T a b l e 51 p r e s e n t s d a t a c o n c e r n i n g t h e s p e c i f i c p o l i c i e s and p r o c e d u r e s g o v e r n i n g t h e t i m e i n t e r v a l s s t u d e n t s h a v e t o a c c e s s g r i e v a n c e r e v i e w s f o l l o w i n g r e c e i v i n g t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s . The l a r g e number o f r e s p o n d e n t s who i n d i c a t e d s u c h p o l i c i e s and p r o c e d u r e s were n o t s p e c i f i e d i n e i t h e r i n s t i t u t i o n a l , or n u r s i n g p r o g r a m p o l i c i e s and/or p r o c e d u r e s , were l i k e l y n u r s i n g programs o f f e r e d w i t h i n i n d e p e n d e n t i n s t i t u t i o n s or i n h o s p i t a l s . As s u c h , t h e n u r s i n g p r o g r a m w o u l d be t h e o n l y p r o g r a m o f f e r e d l e a d i n g t o r e g i s t e r e d n u r s i n g d i p l o m a s f o r t h e i r s t u d e n t s . T h u s , t h e s e i n d e p e n d e n t i n s t i t u t i o n s or h o s p i t a l s w o u l d be t h e o n l y g o v e r n i n g b o d i e s t o e s t a b l i s h s u c h p o l i c i e s and p r o c e d u r e s w i t h o u t t h e b e n e f i t o f a l a r g e r i n s t i t u t i o n s e t t i n g s u c h c o n t r o l s f o r t h e i r p r o g r a m . 177 T a b l e 5 1 . - - S p e c i f i c a t i o n o f P o l i c i e s a n d P r o c e d u r e s G o v e r n i n g D u r a t i o n o f T i m e S t u d e n t H a s t o I n i t i a t e G r i e v a n c e R e v i e w s F o l l o w i n g R e c e i p t o f C l i n i c a l E v a l u a t i o n S P E C I F I C A T I O N O F P O L I C I E S N U M B E R % OF T O T A L A N D / O R P R O C E D U R E S S p e c i f i e d i n i n s t i t u t i o n a l p o l i c y a n d / o r p r o c e d u r e s 3 7 4 5 . 7 N o t s p e c i f i e d 2 1 2 5 . 9 S p e c i f i e d i n n u r s i n g p r o g r a m p o l i c y a n d / o r p r o c e d u r e s 2 0 2 4 . 7 N o r e s p o n s e 3 3 . 7 T O T A L 8 1 1 0 0 . 0 W h e n r e s p o n d e n t s w e r e a s k e d w h o m a s t u d e n t w i s h i n g t o i n i t i a t e a g r i e v a n c e r e v i e w c o n t a c t e d , t h e m o s t l i k e l y p e r s o n i d e n t i f i e d w a s h i s o r h e r c l i n i c a l i n s t r u c t o r ( s ) f o l l o w e d b y t h e h e a d o f t h e n u r s i n g p r o g r a m ( r e f e r t o T a b l e 5 2 ) . T a b l e 5 3 s h o w s w h e r e p o l i c i e s a n d p r o c e d u r e s g o v e r n i n g t h e l e n g t h o f t i m e a s t u d e n t h a s t o i n i t i a t e a n i n s t i t u t i o n a l s t u d e n t a p p e a l a r e s p e c i f i e d i n i n s t i t u t i o n s p r o v i d i n g t h i s l e v e l o f r e v i e w . W h e n a s k e d i f s t u d e n t s w e r e a b l e t o i n i t i a t e f o r m a l a p p e a l s i f t h e y w e r e d i s s a t i s f i e d w i t h t h e o u t c o m e o f t h e i r i n f o r m a l r e v i e w , m o r e t h a n t h r e e - q u a r t e r s o f t h e r e s p o n d e n t s i n d i c a t e d t h e y c o u l d . 1 7 8 T a b l e 5 2 . - - S t u d e n t s ' I n i t i a l C o n t a c t t o R e q u e s t G r i e v a n c e R e v i e w s P E R S O N C O N T A C T E D N U M B E R % O F T O T A L C l i n i c a l i n s t r u c t o r ( s ) H e a d o f n u r s i n g p r o g r a m R e g i s t r a r o f i n s t i t u t i o n C h a i r p e r s o n o f n u r s i n g p r o g r a m s t a n d i n g c o m m i t t e e C o o r d i n a t o r o f y e a r o r c o u r s e H e a d o f i n s t i t u t i o n A n o t h e r a d m i n i s t r a t i v e p e r s o n C h a i r p e r s o n o f i n s t i t u t i o n a l s t a n d i n g c o m m i t t e e S t u d e n t d o e s n o t i n i t i a t e r e v i e w N o r e s p o n s e 2 9 3 5 . 8 2 4 2 9 . 6 7 8 . 6 6 7 . 5 4 4 . 9 3 3 . 7 3 3 . 7 2 2 . 5 1 1 . 2 2 2 . 5 T O T A L 8 1 1 0 0 . 0 T a b l e 5 3 . - - S p e c i f i c a t i o n o f P o l i c i e s a n d P r o c e d u r e s G o v e r n i n g t h e D u r a t i o n o f T i m e S t u d e n t H a s t o I n i t i a t e : A p p e a l H e a r i n g s S P E C I F I C A T I O N O F P O L I C I E S A N D . OR P R O C E D U R E S N U M B E R % O F T O T A L S p e c i f i e d i n i n s t i t u t i o n a l p o l i c y a n d / o r p r o c e d u r e s . 3 9 4 5 . 3 S p e c i f i e d i n n u r s i n g p r o g r a m p o l i c y a n d / o r p r o c e d u r e s 2 9 3 3 . 7 N o t s p e c i f i e d 6 7 . 0 N o r e s p o n s e 1 2 1 4 . 0 T O T A L 8 6 1 0 0 . 0 179 O n l y o n e - t e n t h o f t h e r e s p o n d e n t s s t a t e d t h a t s t u d e n t s c o u l d n o t i n i t i a t e s u c h a n a p p e a l . T a b l e 5 4 a l s o p r e s e n t s w h e r e d i r e c t i o n s f o r s t u d e n t s w i s h i n g t o i n i t i a t e a p p e a l h e a r i n g s a r e s p e c i f i e d . T a b l e 5 4 . - - S p e c i f i c a t i o n o f P o l i c i e s a n d P r o c e d u r e s G o v e r n i n g t h e D u r a t i o n o f T i m e a S t u d e n t H a s t o I n i t i a t e a n I n s t i t u t i o n a l S t u d e n t A p p e a l S P E C I F I C A T I O N O F P O L I C I E S N U M B E R * % O F % O F A N D , OR P R O C E D U R E S T O T A L P R O G R A M S p e c i f i e d i n i n s t i t u t i o n a l p o l i c y a n d / o r p r o c e d u r e s 2 5 3 0 . 9 4 8 . 1 N o t s p e c i f i e d 1 0 1 2 . 3 3 5 . 8 S p e c i f i e d i n t h e L e g i s l a t i v e A c t g o v e r n i n g t h e i n s t i t u t i o n 1 1 . 2 7 . 4 S p e c i f i e d i n n u r s i n g p r o g r a m p o l i c y a n d / o r p r o c e d u r e s 0 0 . 0 0 . 0 N o r e s p o n s e 4 5 5 5 . 6 1 4 . 8 T O T A L 8 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . I n s u m m a r y , r e s p o n d e n t s r e p o r t e d t h a t t h e i r p r o g r a m s w e r e m o r e l i k e l y t o p r o v i d e g r i e v a n c e r e v i e w s t h a n a p p e a l h e a r i n g s a n d , l e s s f r e q u e n t l y , t o p r o v i d e i n s t i t u t i o n a l s t u d e n t a p p e a l s . P r o g r a m s w e r e m o r e l i k e l y t o s p e c i f y t h e l e n g t h o f t i m e s t u d e n t s h a d 180 f o l l o w i n g r e c e i p t o f t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s a n d r e v i e w d e c i s i o n s t o i n i t i a t e r e v i e w s o r a p p e a l h e a r i n g s ( r e f e r t o T a b l e 5 5 ) . T a b l e 5 5 . - - S p e c i f i c a t i o n o f T i m e I n t e r v a l s f o r S t u d e n t s W i s h i n g t o I n i t i a t e R e v i e w s o r A p p e a l s W H E R E T I M E I N T E R V A L G R I E V A N C E A P P E A L I N S T I T X L S T A T E D R E V I E W H E A R I N G S T U D J T A P P E A L N U M B E R % N U M B E R * % N U M B E R % S p e c i f i e d i n i n s t i t - u t i o n a l p o l i c y / p r o c e d u r e s 3 7 4 5 . 7 3 9 4 5 . 3 2 5 3 0 . 9 S p e c i f i e d i n n u r s i n g p r o g r a m p o l i c y / p r o c e d u r e s 2 0 2 4 . 7 2 9 3 3 . 7 0 N o t s p e c i f i e d 2 1 2 5 . 9 6 7 . 0 1 0 1 2 . 3 S p e c i f i e d i n A c t 1 1 . 2 N o r e s p o n s e 3 3 . 7 1 2 1 4 . 0 4 5 5 5 . 6 T O T A L 8 1 1 0 0 . 0 8 6 1 0 0 . 0 8 1 1 0 0 . 0 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . 181 C H A P T E R 6 R E S U L T S : R E L I A B I L I T Y A N D V A L I D I T Y T h i s c h a p t e r w i l l f u r t h e r a n a l y z e d a t a o b t a i n e d r e g a r d i n g c u r r e n t a d m i n i s t r a t i v e p r a c t i c e s a n d p r o c e d u r e s i n i t i a l l y w i t h G o l d e n ' s s t u d y ( 1 9 8 1 ) t h e n a g a i n s t t h e p r o t o t y p i c m o d e l s a n d f i n a l l y i n r e l a t i o n t o i t s r e l i a b i l i t y a n d v a l i d i t y . V a r i a b l e s f r o m G o l d e n ' s s t u d y . G o l d e n ' s s t u d y ( 1 9 8 1 ) a n a l y z e d i n s t i t u t i o n s ' w r i t t e n p o l i c i e s a n d p r o c e d u r e s r e l a t e d t o s t u d e n t d i s m i s s a l s . T a b l e 5 6 p r e s e n t s a c o m p a r i s o n b e t w e e n h i s f i n d i n g s a b o u t t h e f r e q u e n c y o f h e a r i n g s a s c o m p a r e d w i t h t h e f i n d i n g s o f t h i s s t u d y . T a b l e 5 6 . - - C o m p a r i s o n o f t h e F r e q u e n c y o f H e a r i n g s i n G o l d e n L s S t u d y a s C o m p a r e d w i t h t h i s S t u d y I N F O R M A L H E A R I N G F O R M A L H E A R I N G N U M B E R % O F T O T A L N U M B E R % O F T O T A L G o l d e n ( n = 8 ) 3 3 7 . 5 2 2 5 . 0 O r c h a r d ( N = 8 1 ) 2 5 3 0 . 9 6 6 8 1 . 5 182 T h u s , b a s e d o n t h e a b o v e i n f o r m a t i o n , s t u d e n t s i n C a n a d i a n n u r s i n g p r o g r a m s h a d s l i g h t l y l e s s o p p o r t u n i t y t o i n f o r m a l l y r e q u e s t a r e v i e w o f e v a l u a t i v e d e c i s i o n s t h a n d i d s t u d e n t s i n t h e A m e r i c a n p r o f e s s i o n a l p r o g r a m s s t u d i e d b y G o l d e n . H o w e v e r , t h e s e s a m e s t u d e n t s h a d a m u c h g r e a t e r o p p o r t u n i t y t o i n s t i t u t e f o r m a l l e v e l s o f a p p e a l t h a n d i d t h e i r A m e r i c a n c o u n t e r p a r t s . T h e f i r s t d i f f e r e n c e i s s m a l l e n o u g h t h a t i t m i g h t a r i s e b y c h a n c e b e c a u s e o f t h e s m a l l n u m b e r o f c a s e s (8) i n t h e G o l d e n s t u d y . G o l d e n a l s o r e p o r t e d t h a t m o r e t h a n o n e - t h i r d o f A m e r i c a n s t u d e n t s i n p r o f e s s i o n a l p r o g r a m s h a d t h e r i g h t t o a n a d v i s o r d u r i n g a n a p p e a l h e a r i n g . T h e s e a d v i s o r s c o u l d b e l a w y e r s i n o n l y o n e o f t h e p r o f e s s i o n a l p r o g r a m s . T a b l e 5 7 . p r o v i d e s a c o m p a r i s o n o f G o l d e n ' s f i n d i n g s w i t h t h o s e o f t h i s s t u d y . C a n a d i a n n u r s i n g s t u d e n t s h a d a g r e a t e r o p p o r t u n i t y t o h a v e a d v i s o r s a t b o t h i n f o r m a l a n d f o r m a l l e v e l s o f r e v i e w s t h a n d i d t h o s e r e p o r t e d i n G o l d e n ' s s t u d y . 183 T a b l e 57. Comparison of Use o f A d v i s o r s i n Golden's Study V e r s u s T h i s Study STUDY STUDENT ADVISOR USE LAWYER AS ADVISOR NUMBER 1 OF TOTAL NUMBER % OF TOTAL G o l d e n 1 s (n- 8) 3 37 .5 1 12.5 Orchard's (N= 81) 56 69.0 46j 57 .5 66* 81.5 1.Reports t h e frequ e n c y o£ i n s t i t u t i o n s ' a l l o w i n g l a w y e r s t o be s t u d e n t s ' a d v i s o r a t i n f o r m a l h e a r i n g s and Z.at f o r m a l h e a r i n g s . T a b l e 58 p r e s e n t s the use o f e v i d e n c e and w i t n e s s e s a t h e a r i n g s as compared between t h i s study and Golden's s t u d y . T a b l e 58. -* Comparison i n Use o f E v i d e n c e and Wit n e s s e s 1 Between Golden's Study and T h i s Study STUDY USE OF EVIDENCE USE OF WITNESSES NUMBER % OF TOTAL NUMBER 7o OF TOTAL Golden's (n=8) 3 37 .5 4 50.0 Orchard's (N=81) 61i. 74.9 19 24.3 55 * 68.0 l.denotes use o f e v i d e n c e a t i n f o r m a l h e a r i n g s ^denotes use o f e v i d e n c e a t f o r m a l h e a r i n g s A c c o r d i n g t o Golden's study r e s p o n d e n t s , e v i d e n c e c o u l d be p r e s e n t e d a t h e a r i n g s i n more than o n e - t h i r d 184 o f p r o f e s s i o n a l p r o g r a m s . H o w e v e r , t h i s f i n d i n g c o u l d b e m i s l e a d i n g a s G o l d e n r e s t r i c t e d t h e d e f i n i t i o n o f " l i m i t e d e v i d e n c e u s e " t o i t s l e g a l d e f i n i t i o n w h e n d e t e r m i n i n g w h e t h e r e v i d e n c e w o u l d b e a l l o w e d o r n o t w h i l e t h i s s t u d y d e f i n e d e v i d e n c e t o m e a n " d o c u m e n t s u s e d . " H o w e v e r , G o l d e n r e p o r t e d t h a t o n e - h a l f o f t h e p r o g r a m s m a d e p r o v i s i o n f o r w i t n e s s e s t o b e i n t e r v i e w e d d u r i n g h e a r i n g s . I n t h i s s t u d y , o n l y o n e - q u a r t e r o f t h e r e s p o n d e n t s i n d i c a t e d t h a t w i t n e s s e s w e r e i n t e r v i e w e d i n C a n a d i a n n u r s i n g p r o g r a m s . G o l d e n a l s o o b t a i n e d d a t a r e l a t e d t o t h e f r e q u e n c y w i t h w h i c h i n s t i t u t i o n s m a i n t a i n e d a n " a d e q u a t e r e c o r d o f h e a r i n g p r o c e e d i n g s " f o r a c a d e m i c d i s m i s s a l s . H e d e f i n e d " a d e q u a t e " a s m a k i n g p r o v i s i o n f o r t a p e r e c o r d i n g s o f t h e p r o c e e d i n g s a n d / o r w r i t t e n t r a n s c r i p t s o f t h e p r o c e e d i n g s o r p r o v i d i n g w r i t t e n s u m m a r i e s o f t h e p r o c e e d i n g s . T h i s s t u d y a l s o u t i l i z e d a s i m i l a r d e f i n i t i o n t o o b t a i n c o m p a r a b l e d a t a . T a b l e 59 o u t l i n e s t h e c o m p a r i s o n o f d a t a o b t a i n e d f r o m b o t h s t u d i e s . U s i n g G o 1 d e n ' s d e f i n i t i o n a l m o s t a l l o f t h e C a n a d i a n n u r s i n g p r o g r a m s i n t h e p r e s e n t s t u d y p r o v i d e d 185 a n a d e q u a t e r e c o r d a t i n f o r m a l r e v i e w s a n d a l l p r o g r a m s p r o v i d e d s u c h a r e c o r d a t f o r m a l h e a r i n g s . T h u s , C a n a d i a n n u r s i n g p r o g r a m s e n s u r e d t h a t a d e q u a t e r e c o r d s o f h e a r i n g s w e r e k e p t m o r e c o n s i s t e n t l y t h a n d i d t h e i n s t i t u t i o n s i n G o l d e n ' s s t u d y . T a b l e 5 9 . - - C o m p a r i s o n o f U s e o f R e c o r d i n g H e a r i n g P r o c e e d i n g s B e t w e e n G o l d e n ' s a n d t h e P r e s e n t S t u d y S T U D Y U S E O F N U M B E R A D E Q U A T E R E C O R D % O F T O T A L G o l d e n ' s ( n = 8) 3 3 7 . 5 O r c h a r d ' s ( N = 8 1 ) 8 0 9 8 . 8 8 1 1 0 0 . 0 p r o v i s i o n o f a n a d e q u a t e r e c o r d a t i n f o r m a l h e a r i n g s p r o v i s i o n s o f a n a d e q u a t e r e c o r d a t f o r m a l h e a r i n g s . D a t a f r o m t h i s s t u d y h a v e p r o v i d e d a m o r e e x t e n s i v e a s s e s s m e n t o f p o l i c i e s a n d p r o c e d u r e s u s e d d u r i n g a c a d e m i c d i s m i s s a l o f n u r s i n g s t u d e n t s f o r c l i n i c a l p e r f o r m a n c e i n a d e q u a c i e s . V a r i a n c e f r o m G o l d e n L s d a t a m a y b e d u e t o h i s u s e o f d a t a b a s e d o n p r i n t e d s t u d e n t h a n d b o o k s o f i n s t i t u t i o n s r a t h e r t h a n o n a s u r v e y o f a c t u a l p r a c t i c e s . H e d i d n o t e i n h i s s t u d y t h a t " t h e c o m m e n t s s u g g e s t t h a t p r a c t i c e a t a n y g i v e n i n s t i t u t i o n m a y v a r y f r o m t h e p u b l i s h e d 186 p r o c e d u r a l g u i d e l i n e s , , b u t such v a r i a t i o n i s u s u a l l y i n the d i r e c t i o n o f more r a t h e r than l e s s p r o c e d u r a l p r o t e c t i o n " (1981, 1 7 0 ) . The above f i n d i n g s r e i n f o r c e h i s comment as t h e r e appears t o be g e n e r a l l y g r e a t e r p r o c e d u r a l p r o t e c t i o n f o r s t u d e n t s i n Canadian n u r s i n g programs than h i s d a t a suggest f o r t h e i r American c o u n t e r p a r t s . P r o t o t y p i c Models The Judgment Model was d e f i n e d i n c h a p t e r 3 as c o n s i s t i n g o f i n t e r d e p e n d e n t elements i n v o l v e d d u r i n g the d e c i s i o n m a k i n g p r o c e s s about s t u d e n t s ' c l i n i c a l p e rformance. T h i s Model was then a p p l i e d t o b o t h the i n f o r m a l and : f o r m a l l e v e l s o f r e v i e w s or h e a r i n g s . I n t e r d e p e n d e n t elements o f the Model i n c l u d e the academic component, the a d m i n i s t r a t i v e component, and the component f o r the p r o v i s i o n o f n a t u r a l j u s t i c e . D ata were o b t a i n e d t o dete r m i n e i f the p r i m a r y f o c i a t each l e v e l were r e f l e c t e d as o u t l i n e d i n the Model ( r e f e r t o T a b l e 6 0 ) . The p r i m a r y f o c u s d u r i n g g r i e v a n c e r e v i e w s ( L e v e l I I ) , a c c o r d i n g t o the p r o t o t y p i c model, was the 187 a c a d e m i c d e c i s i o n . H o w e v e r , i n n u r s i n g p r o g r a m s r e s p o n d i n g t o t h i s q u e s t i o n , t h e a c a d e m i c c o m p o n e n t w a s t h e l e a s t e m p h a s i z e d , s i g n i f i c a n t l y , b e c a u s e t h e a c a d e m i c c o m p o n e n t r e l a t e d t o t h e p r o f e s s i o n a l n u r s e s ' d e c i s i o n a b o u t a s t u d e n t ' s a b i l i t y t o p r a c t i c e n u r s i n g . T a b l e 6 0 . - - M o d e l C o m p o n e n t E m p h a s i s a t E a c h L e v e l o f R e v i e w o r H e a r i n g L E V E L A C A D E M I C A D M I N I S T R A T I V E N A T U R A L J U S T I C E T O T A L C O M P O N E N T C O M P O N E N T C O M P O N E N T OF N U M B E R % OF N U M B E R % O F N U M B E R % O F R E S P O N S E T O T A L T O T A L T O T A L / P R O G ' M T O T A L 1 1 6 2 3 0 . 1 7 0 3 4 . 0 7 4 3 5 . 9 2 0 6 / 8 1 I I I 4 8 2 8 . 4 5 7 3 3 . 7 6 4 3 7 . 9 1 6 9 / 8 1 I V 1 6 2 3 . 9 2 4 3 4 . 8 2 7 3 9 . 1 6 7 / 8 1 v a l i d i t y o f t h e o b s e r v a t i o n s m a d e b y t h e o r i g i n a l e v a l u a t o r ; t h e p r o c e d u r e s u s e d d u r i n g t h e e v a l u a t i o n o f t h e s t u d e n t ; t h e f a i r n e s s a n d r e a s o n a b l e n e s s o f t h e e v a l u a t i o n o u t c o m e . P r o v i s i o n o f n a t u r a l j u s t i c e a p p e a r s t o b e t h e p r i m a r y f o c u s a t a p p e a l h e a r i n g s ( L e v e l I I I ) , f o l l o w e d b y t h e p r o c e d u r e s u s e d . B o t h o f t h e s e c o m p o n e n t s r e f l e c t t h e p r i m a r y f o c i i d e n t i f i e d i n t h e p r o t o t y p i c m o d e l f o r t h i s l e v e l o f r e v i e w . A n i n t e r e s t i n g f i n d i n g 1 8 8 i s t h e c o n t i n u i n g e m p h a s i s o n t h e v a l i d i t y o f t h e o b s e r v a t i o n s m a d e , a f a c t o r w h i c h r e l a t e s t o t h e p r o f e s s i o n a l j u d g m e n t m a d e b y t h e i n s t r u c t o r . A t t h e l e v e l o f i n s t i t u t i o n a l s t u d e n t a p p e a l s , a s i m i l a r p a t t e r n t o t h a t o f t h e a p p e a l h e a r i n g w a s f o u n d ( L e v e l I V ) , a l t h o u g h t h e r e w a s l e s s e m p h a s i s o n t h e a c a d e m i c c o m p o n e n t o f t h e j u d g m e n t t h a n i n p r e v i o u s l e v e l s o f r e v i e w . T h e F l o w M o d e l o f J u d g m e n t s o r R e v i e w s p r o v i d e s a s e q u e n c e o f s t e p s u s e d b y i n s t i t u t i o n s t o a r r i v e a t d e c i s i o n s c o n c e r n i n g e a c h p r e v i o u s l e v e l o f r e v i e w o r h e a r i n g ( r e f e r t o F i g u r e 6 , p a g e 8 1 ) . T a b l e 6 1 o u t l i n e s t h e ; f r e q u e n c y w i t h w h i c h r e s p o n d e n t s ' " p r o g r a m s m a d e p r o v i s i o n f o r t h e v a r i o u s s t e p s a s o u t l i n e d i n t h e a b o v e m o d e l . T h e g r i e v a n c e r e v i e w i s t h e o n l y s t e p i n t h i s m o d e l w h i c h c o n s i s t e n t l y o c c u r s i n t h e r e s p o n d i n g p r o g r a m s . A p p e a l h e a r i n g s a r e p r o v i d e d i n m o r e t h a n t h r e e - q u a r t e r s o f t h e p r o g r a m s w h i l e o n l y s l i g h t l y m o r e t h a n o n e - t h i r d o f t h e p r o g r a m s p r o v i d e i n s t i t u t i o n a l s t u d e n t a p p e a l s . I t a p p e a r s f r o m t h e s e d a t a t h a t t h e F l o w M o d e l o f J u d g m e n t s o r R e v i e w s w a s n o t b e i n g 1 89 c o n s i s t e n t l y a p p l i e d , a s w a s o u t l i n e d i n t h e p r o t o t y p i c m o d e l . T a b l e 6 1 . - - F r e q u e n c y o f P r o g r a m R e s p o n d e n t s ' R e p o r t i n g t h e P r o v i s i o n o f t h e S t e p s a s O u t l i n e d i n t h e F l o w M o d e l o f J u d g m e n t s o r R e v i e w s F L O W J U D G M E N T / R E V I E W N U M B E R % O F T O T A L ( N = 8 1 ) # 1 J u d g m e n t m a d e b y c l i n i c a l i n s t r u c t o r a l o n e 2 8 3 4 . 6 J u d g m e n t m a d e b y m o r e t h a n o n e c l i n i c a l i n s t r u c t o r 5 1 6 3 . 0 R e v i e w o u t s i d e o f n u r s i n g p r o g r a m 1 1 1 3 . 6 # 2 G r i e v a n c e r e v i e w 8 1 1 0 0 . 0 # 3 A p p e a l h e a r i n g 7 1 8 7 . 0 # 4 I n s t i t u t i o n a l s t u d e n t a p p e a l ; 3 0 3 6 . 8 # 5 E x t e r n a l a p p e a l * d a t a n o t p r o v i d e d . I n s u m m a r y , t h e p r o t o t y p i c j u d g m e n t p r o c e s s w a s r e l a t i v e l y c o n s i s t e n t w i t h t h e p r o c e s s e s p r o v i d e d i n a n u m b e r o f t h e n u r s i n g p r o g r a m s f o r w h i c h d a t a w e r e o b t a i n e d . H o w e v e r , t h e p r o t o t y p i c f l o w m o d e l o f j u d g m e n t s o r r e v i e w s w a s o n l y c o n s i s t e n t i n r e l a t i o n t o t h e g r i e v a n c e r e v i e w . B a s e d o n t h e a b o v e f i n d i n g s , t h e q u e s t i o n a r i s e s a s t o w h e t h e r t h e s e p r o t o t y p i c m o d e l s 190 a p p r o p r i a t e l y r e f l e c t w h a t t h e p r a c t i c e s g o v e r n i n g s t u d e n t s L c l i n i c a l e v a l u a t i o n s a n d s u b s e q u e n t r e v i e w s s h o u l d b e o r w h e t h e r t h e m o d e l s s h o u l d b e a l t e r e d t o r e f l e c t c u r r e n t p r a c t i c e s . I n t h e f o r m e r c a s e , t h e m o d e l s r e f l e c t r e p o r t s i n t h e l i t e r a t u r e a s w e l l a s s e c o n d a r y l e g a l w r i t i n g s o n t h e t o p i c . I n t h e l a t t e r c a s e , a l t e r i n g t h e s e m o d e l s w o u l d i n d e e d m o r e l i k e l y r e f l e c t c u r r e n t p r a c t i c e s , b u t i f t h e s e a r e a t v a r i a n c e w i t h w h a t t h e p r a c t i c e s s h o u l d b e b a s e d o n w r i t i n g s t h e n a l t e r a t i o n w o u l d n o t s e r v e t o f a c i l i t a t e d e v e l o p m e n t o f s y s t e m s t o p r o t e c t t h e r i g h t s o f s t u d e n t s , f a c u l t y , a n d i n s t i t u t i o n s . R e l i a b i l i t y a n d V a l i d i t y o f I n s t r u m e n t R e l i a b i l i t y o f d a t a w a s d e t e r m i n e d t h r o u g h a s e p a r a t e a n a l y s i s o f w r i t t e n p o l i c i e s a n d / o r p r o c e d u r e s p r o v i d e d b y r e s p o n d i n g p r o g r a m s . T h e s e d o c u m e n t s w e r e a n a l y z e d f o r t h e i r c o n t e n t , w h i c h r e f l e c t e d q u e s t i o n s w i t h i n t h e s a m e q u e s t i o n n a i r e a s t h a t c o m p l e t e d b y e a c h r e s p o n d e n t f o r h i s o r h e r p r o g r a m . T h u s , a s e p a r a t e q u e s t i o n n a i r e w a s c o m p l e t e d b y t h e r e s e a r c h e r u s i n g t h e p r o g r a m ' s w r i t t e n d o c u m e n t s . D a t a o b t a i n e d t h r o u g h t h e a b o v e p r o c e s s w e r e t h e n c o m p a r e d w i t h d a t a p r o v i d e d b y t h e s a m e p r o g r a m ' s r e s p o n d e n t t o t h e i n i t i a l q u e s t i o n n a i r e . 191 T h e s e t w o s e t s o f d a t a w e r e t h e n a s s e s s e d f o r s y n c h r o n i c r e l i a b i l i t y b y d e t e r m i n i n g t h e i r l e v e l o f a g r e e m e n t u s i n g c o n t i n g e n c y t a b l e s o f f r e q u e n c i e s f o r e a c h q u e s t i o n ' s o p t i o n s . T h e m e a n f o r q u e s t i o n o p t i o n s w a s t h e n c a l c u l a t e d . A n e x a m p l e o f t h e p r o c e s s u s e d t o d e t e r m i n e t h e m e a n a n d a s u m m a r y o f t h e d a t a c a n b e f o u n d i n A p p e n d i x F . G e n e r a l l y t h e s y n c h r o n i c r e l i a b i l i t y f o r q u e s t i o n o p t i o n s w a s i n t h e 50% r a n g e . S u c h a f i n d i n g c o u l d b e d u e t o s e v e r a l f a c t o r s : ( a ) F a c u l t y i n n u r s i n g p r o g r a m s f o l l o w u n w r i t t e n p r o c e d u r e s r a t h e r t h a n t h o s e w h i c h a r e w r i t t e n . ( b ) F a c u l t y i ; n n u r s i n g p r o g r a m s f o l l o w p o l i c i e s a n d / o r p r o c e d u r e s w h i c h h a v e b e e n r e v i s e d b u t a s y e t h a v e n o t b e e n i n c o r p o r a t e d i n t h e e x i s t i n g d o c u m e n t s . ( c ) F a c u l t y h a v e d e v e l o p e d m o r e s p e c i f i c p r a c t i c e s t h a n t h o s e d o c u m e n t e d i n t h e i r p r o g r a m ' s w r i t t e n p o l i c i e s a n d , o r p r o c e d u r e s . ( d ) f a c u l t y d o n o t f o l l o w t h e i r p r o g r a m ' s w r i t t e n p o l i c i e s a n d / o r p r o c e d u r e s . ( e ) T h e r e s e a r c h e r ' s f a m i l i a r i t y w i t h t h e c o n t e x t o f t h e q u e s t i o n s ' m e a n i n g c o u l d l e a d t o v a r i a t i o n s i n s e l e c t i o n o f o p t i o n s f r o r n t h o s e o f t h e r e s p o n d e n t s . 192 ( f ) R e s p o n d e n t s ' b i a s m a y h a v e e n t e r e d i n t o s e l e c t i o n s o f o p t i o n s f o r q u e s t i o n s e i t h e r d u e t o t h e r e s p o n d e n t r e p o r t i n g w h a t i s b e l i e v e d t o b e , o r s h o u l d b e , t h e p r a c t i c e r a t h e r t h a n w h a t i s t h e a c t u a l p r a c t i c e - V a l i d i t y o f d a t a m i g h t a l s o b e i n q u e s t i o n d u e t o t h e f a c t t h a t t h i s s t u d y w a s t h e f i r s t a t t e m p t t o a n a l y z e e v a l u a t i v e a n d r e v i e w p r a c t i c e s i n n u r s i n g p r o g r a m s . I t w a s d i f f i c u l t t o d e v e l o p t e r m i n o l o g y w h i c h w o u l d b e u n d e r s t o o d t h r o u g h o u t a l l o f t h e n u r s i n g p r o g r a m s a n d p r o v i n c e s d u e t o r e g i o n a l a n d l a n g u a g e ( F r e n c h ) d i f f e r e n c e s . T h e r e f o r e , t h e s e m a n t i c v a l i d i t y o f p o r t i o n s o f d a t a m i g h t b e f a u l t y . I n a d d i t i o n , t h e r e w e r e r a n d o m e r r o r s o f m e a s u r e m e n t t h r o u g h a m b i g u o u s i n s t r u c t i o n s i n s o m e o f t h e q u e s t i o n s . R e s p o n d e n t s w e r e a s k e d t o s k i p a s e c t i o n o f t h e q u e s t i o n n a i r e r a t h e r t h a n t o s k i p a n u m b e r o f q u e s t i o n s i n o n e i n s t a n c e . T h i s e r r o r l e d t o i n c o m p l e t e d a t a a b o u t s o m e a s p e c t s o f p r o g r a m s ' p r a c t i c e s . C o d i n g e r r o r s a r e a l s o l i k e l y t o b e p r e s e n t e v e n t h o u g h s e v e r a l a c t i o n s w e r e t a k e n t o a t t e m p t t o 193 e l i m i n a t e s u c h e r r o r s , i n c l u d i n g : ( a ) t h e c o d i n g o f d a t a t w i c e u s i n g s e p a r a t e f o r m s , ( b ) r e - c h e c k i n g o f c o d e d d a t a b y a n i n d e p e n d e n t c o d e r , ( c ) r e - c h e c k i n g c o m p u t e r d a t a i n p u t a g a i n s t a p r i n t - o u t , ( d ) r e - a s s e s s i n g a n y s i g n i f i c a n t v a r i a t i o n s i n s c o r i n g w h e n s u c h o c c u r r e d d u r i n g t h e c o m p u t a t i o n o f s c o r e s . F i n a l l y , c o r r e l a t i o n a l v a l i d i t y w a s a s s e s s e d t h r o u g h t h e a n a l y s i s o f d a t a o b t a i n e d a s c o m p a r e d w i t h t h e D a t a G e n e r a t i o n M o d e l a n d t h e J u d g m e n t P r o c e s s M o d e l . T h e s e m o d e l s w e r e f o r m u l a t e d d u r i n g t h e d e v e l o p m e n t p h a s e o f t h i s s t u d y a n d w e r e t h e b a s i s o f t h e q u e s t i o n n a i r e d e v e l o p m e n t . D a t a o b t a i n e d w i t h i n t h e s e c t i o n s o f t h e q u e s t i o n n a i r e w e r e t r a n s l a t e d i n t o t h e c o m p o n e n t s o f t h e m o d e l a n d a n a n a l y s i s o f t h e i r r e s u l t s w a s d e t e r m i n e d . I n m o s t l e v e l s , d a t a w e r e a v a i l a b l e t o d e t e r m i n e r e s p o n s e s t o t h e m o d e l c o m p o n e n t s . H o w e v e r , d u e t o a m b i g u o u s i n s t r u c t i o n s w i t h i n t h i s i n s t r u m e n t t h e s i z e o f t h e r e s p o n d e n t p o p u l a t i o n v a r i e d a n d m a y h a v e l e d t o i n a c c u r a c i e s i n t h e i n t e r p r e t a t i o n . 194 I n s u m m a r y , r e l i a b i l i t y a n d v a l i d i t y o f d a t a o b t a i n e d t h r o u g h t h e u s e o f t h i s i n s t r u m e n t w e r e w e a k d u e t o e i t h e r a l a c k o f s p e c i f i e d p o l i c i e s a n d p r o c e d u r e s i n p r o g r a m s w h i c h l e a d r e s p o n d e n t s t o r e l a t e t h e i r own p e r c e p t i o n o f p r o g r a m p r a c t i c e s o r s e m a n t i c p r o b l e m s w i t h t e r m s u s e d i n t h e i n s t r u m e n t w h i c h w e r e a t v a r i a n c e w i t h t h o s e u s e d i n p r o g r a m s . . 195 CHAPTER 7 RESULTS: INCIDENCE OF GRIEVANCES AND APPEALS T h i s c h a p t e r w i l l r e p o r t on the a n a l y s i s o f d a t a o b t a i n e d from the second i n s t r u m e n t and a s s e s s the r e l i a b i l i t y and v a l i d i t y o f the r e s u l t s . F i f t y - f i v e r e s p o n d e n t s p r o v i d e d d a t a r e g a r d i n g a t o t a l o f 205 cases i n w h i c h t h e i r n u r s i n g program s t u d e n t s g r i e v e d or a p p e a l e d t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s . Programs v a r i e d i n p r o v i d i n g cases as r e q u e s t e d . T h i s v a r i a t i o n ranged from a l l cases d u r i n g t h e r e q u e s t e d p e r i o d o f time t o a sample of cases d u r i n g the v a r i o u s y e a r s . Thus, the a n a l y s i s o f d a t a can o n l y be i n t e r p r e t e d f o r the cases p r o v i d e d . Data from t h e s e cases were a n a l y z e d t o determine: (a) the number o f l e v e l s o f r e v i e w s t u d e n t s used w i t h i n t h e s e i n s t i t u t i o n s , (b) the outcomes o f each l e v e l o f r e v i e w , (c) the f r e q u e n c y w h i c h t h e s e s t u d e n t s launched e x t e r n a l a p p e a l s , (d) the a g e n c i e s i n v o l v e d i n t h e s e e x t e r n a l a p p e a l s , (e) the outcomes o f these e x t e r n a l 1 9 6 a p p e a l s , a n d ( f ) t h e i m p a c t o f t h e s e o u t c o m e s o n t h e i n s t i t u t i o n s . T h e s e c a s e s w e r e a l s o a n a l y z e d f o r t h e i r r e l a t i o n s h i p s w i t h t h e f o l l o w i n g d e m o g r a p h i c v a r i a b l e s : t h e t y p e o f i n s t i t u t i o n , t h e s t u d e n t e n r o l l m e n t i n t h e n u r s i n g p r o g r a m , a n d t h e p r o v i n c e i n w h i c h t h e p r o g r a m w a s l o c a t e d . ( a ) T h e n u m b e r o f l e v e l s o f r e v i e w u s e d b y s t u d e n t s . T a b l e 6 2 o u t l i n e s t h e f r e q u e n c y w i t h w h i c h s t u d e n t s r e q u e s t e d r e v i e w s o f t h e i r c l i n i c a l e v a l u a t i v e d e c i s i o n s . T a b l e 6 2 . - - N u m b e r o f R e v i e w s o r H e a r i n g s i n I n s t i t u t i o n s T Y P E O F R E V I E W / N U M B E R * % O F T O T A L H E A R I N G A p p e a l H e a r i n g 1 5 6 4 8 . 6 G r i e v a n c e R e v i e w 1 3 5 4 2 . 1 I n s t i t u t i o n a l S t u d e n t A p p e a l 2 0 6 . 2 E x t e r n a l A p p e a l 1 0 3 . 1 T O T A L 3 2 1 1 0 0 . 0 * R e s p o n d e n t s r e p o r t e d t h a t s i n g l e c a s e s w e r e r e v i e w e d a t o n e o r m o r e l e v e l s . N u m b e r o f c a s e s i s 2 0 5 . 197 Students more f r e q u e n t l y were granted appeal h e a r i n g s than e i t h e r grievance reviews or i n s t i t u t i o n a l student appeals. I t was a l s o noted that l e s s than ten percent of the cases were reviewed at the i n s t i t u t i o n a l student appeal l e v e l or e x t e r n a l l y . Table 63 provi d e s data r e l a t i n g to the number of programs o f f e r r i n g the v a r i o u s l e v e l s of hearings or r eviews. Table 63 -- Number of Programs P r o v i d i n g L e v e l s of Hearings or Reviews GRIEVANCE REVIEW APPEAL HEARING INSTIT'L ST'D APPEAL EXTERNAL APPEAL NUMBER OF PROGRAMS 35 44 10 7 GRIEVANCE REVIEW 28 6 5 APPEAL HEARING 28 9 7 INSTIT'L ST'D APPEAL 6 9 2 APPEAL H. + INSTIT'L ST'D APPEAL 5 1 198 Programs o f f e r e d appeal hearings more f r e q u e n t l y than other l e v e l s of reviews. Only f i v e programs pro v i d e d grievance reviews, appeal h e a r i n g s , and i n s t i t u t i o n a l student appeals w h i l e 28 programs p r o v i d e d both grievance reviews and appeal h e a r i n g s . A t o t a l o f nine programs pr o v i d e d appeal hearings and i n s t i t u t i o n a l student appeals. Of the f i v e programs p r o v i d i n g f o r three l e v e l s o f review, two of these programs were i n v o l v e d i n e x t e r n a l appeals. (b) The outcome of each l e v e l of review. T a b l e 64 o u t l i n e s the i n c i d e n c e of reviews or hearings r e s u l t i n g i n u p h o l d i n g or modifying the i n i t i a l e v a l u a t i v e d e c i s i o n . T a b l e 6 4 . T * Outcomes of Reviews or Hearings TYPE OF REVIEW DECISION UPHELD NUMBER DECISION MODIFIED NUMBER TOTAL FOR LEVEL % Grievance Review 120 Appeal Hearing 96 I n s t i t u t i o n a l 88.9 61.5 15 60 11.1 38.5 135 156 Student Appeal 13 E x t e r n a l Appeal 10 65.0 100.0 7 0 35.0 00.0 20 10 TOTAL 236 80 316 199 I t w a s s i g n i f i c a n t t h a t a l l t h e e x t e r n a l a p p e a l s r e s u l t e d i n s u p p o r t o f t h e i n i t i a l d e c i s i o n . G r i e v a n c e R e v i e w s o n l y r e s u l t e d i n t h e a l t e r a t i o n o f o n e - t e n t h o f t h e d e c i s i o n s w h i l e a t b o t h t h e A p p e a l H e a r i n g a n d t h e I n s t i t u t i o n a l S t u d e n t A p p e a l l e v e l s a p p r o x i m a t e l y o n e - t h i r d o f t h e d e c i s i o n s w e r e m o d i f i e d . ( c ) I n c i d e n c e o f s t u d e n t s l a u n c h i n g e x t e r n a l a p p e a l % . T a b l e 6 3 i d e n t i f i e d t h a t o n l y t e n s t u d e n t s o u t o f t h e 2 0 5 c a s e s l a u n c h e d e x t e r n a l a p p e a l s . T h u s , f o r t h e c a s e s r e p o r t e d d u r i n g t h e t i m e i n t e r v a l f r o m 1 9 7 8 t o 1 9 8 5 , t h e o v e r a l l r a t e o f s t u d e n t r e q u e s t s f o r e x t e r n a l a p p e a l s w a s 1 . 2 5 p e r y e a r . T a b l e 6 5 o u t l i n e s t h e t y p e o f i n s t i t u t i o n w h e r e t h e s e c a s e s o c c u r r e d . T a b l e 6 5 . - - T y p e o f I n s t i t u t i o n F r o m W h i c h E x t e r n a l A p p e a l s A r o s e T Y P E O F I N S T I T U T I O N N U M B E R OF % O F T O T A L E X T E R N A L R E V I E W S C o l l e g e 6 6 0 . 0 I n s t i t u t e o f T e c h n o l o g y 2 2 0 . 0 H o s p i t a l 1 1 0 . 0 I n d e p e n d e n t N u r s i n g S c h o o l 1 1 0 . 0 U n i v e r s i t y 0 0 0 . 0 T O T A L 1 0 1 0 0 . 0 200 ( d ) A g e n c i e s i n v o l v e d i n s t u d e n t e x t e r n a l a p p e a l s . T a b l e 6 6 o u t l i n e s t h e a g e n c y w h i c h t h e t e n s t u d e n t s r e q u e s t e d t h e i r e x t e r n a l a p p e a l s t o b e h e a r d b e f o r e . T a b l e 6 6 . - - A g e n c y H e a r i n g S t u d e n t s ' E x t e r n a l A p p e a l s A G E N C Y N U M B E R E X T E R N A L O F A P P E A L S % O F T O T A L C o u r t s 5 5 0 . 0 H u m a n R i g h t s B r a n c h 3 3 0 . 0 P r o v i n c i a l O m b u d s m a n 2 2 0 . 0 T O T A L 1 0 1 0 0 . 0 H o w e v e r , w h e n r e s p o n d e n t s w e r e a s k e d w h i c h a g e n c i e s a c t u a l l y c o n d u c t e d t h e s e e x t e r n a l r e v i e w s , n o t a s i n g l e r e s p o n d e n t r e p o r t e d t h a t t h e r e v i e w s w e r e a d j u d i c a t e d b e f o r e t h e c o u r t s . T h e r e f o r e , a l t h o u g h f i v e s t u d e n t s r e q u e s t e d t h a t t h e c o u r t s h e a r t h e i r c o m p l a i n t s , i n r e a l i t y s u c h h e a r i n g s d i d n o t o c c u r . R e s p o n d e n t s d i d r e p o r t t h a t t h r e e c a s e s w e r e s e t t l e d o u t o f c o u r t a n d a f u r t h e r c a s e w a s w i t h d r a w n b y t h e s t u d e n t ; d a t a w e r e n o t p r o v i d e d a b o u t t h e f i n a l c a s e . A f u r t h e r f i v e c a s e s w e r e i n v e s t i g a t e d b y H u m a n R i g h t s C o m m i s s i o n e r s a n d t h r e e b y p r o v i n c i a l o m b u d s m e n . 201 ( e ) O u t c o m e o f t h e e x t e r n a l a p p e a l s . I n a l l t e n c a s e s t h e i n s t i t u t i o n s ' " d e c i s i o n s w e r e u p h e l d . T h e r e a s o n s s t u d e n t s r e q u e s t e d t h e s e e x t e r n a l a p p e a l s a r e p r e s e n t e d i n T a b l e 6 7 . T h u s , t h e p r i m a r y r e a s o n s t u d e n t s r e q u e s t e d s u c h a p p e a l s w a s r e l a t e d t o t h e i r p e r c e p t i o n o f b e i n g d i s c r i m i n a t e d a g a i n s t f o l l o w e d b y t h e i r p e r c e p t i o n t h a t t h e e v a l u a t i o n w a s e i t h e r u n f a i r o r b i a s e d . T a b l e 6 7 . - - S t u d e n t s ' " R e a s o n s f o r R e q u e s t i n g E x t e r n a l A p p e a l R E A S O N N U M B E R * % O F % O F T O T A L C A S E S D i s c r i m i n a t i o n o n a P r o - h i b i t e d G r o u n d 7 5 0 . 0 3 . 4 D e n i a l o f N a t u r a l J u s t i c e 5 3 5 . 7 2 . 4 E d u c a t i o n a l M a l p r a c t i c e 2 1 4 . 3 1 . 0 D e f a m a t i o n o f C h a r a c t e r 0 0 0 . 0 0 . 0 B r e a c h o f C o n t r a c t 0 0 0 . 0 0 . 0 N o t k n o w n 0 • 0 0 . 0 0 . 0 T O T A L 1 4 1 0 0 . 0 * S o m e s t u d e n t s g a v e m o r e t h a n o n e r e a s o n f o r a p p e a l i n g . f ) I m p a c t o f d e c i s i o n o u t c o m e s o f e d u c a t i o n a l i n s t i t u t i o n s . R e s p o n d e n t s d i d n o t r e p o r t t h a t a n y 202 c h a n g e s i n t h e i r i n s t i t u t i o n s ' p o l i c i e s o r p r o c e d u r e s w e r e u n d e r t a k e n a s a r e s u l t o f e x t e r n a l r e v i e w s . T h i s w o u l d b e a n a n t i c i p a t e d f i n d i n g c o n s i d e r i n g t h e f a c t t h a t n o n e o f t h e i n s t i t u t i o n s ' d e c i s i o n s w e r e a l t e r e d b y e x t e r n a l r e v i e w s . R a t e o f c a s e s . D a t a c o n c e r n i n g t h e i n c i d e n c e o f r e v i e w s o r a p p e a l s w e r e s u m m a r i z e d t o o b t a i n t h e r a t e o f c a s e s p e r 1 0 0 s t u d e n t s i n e a c h t y p e o f i n s t i t u t i o n b y p r o v i n c e a n d b y y e a r s f r o m 1 9 7 8 t o 1 9 8 5 ( r e f e r t o T a b l e s 6 8 t o 7 7 ) . U s i n g t h e s e d a t a , t h e e x p e c t e d f r e q u e n c i e s o f t h e a b o v e w e r e c a l c u l a t e d . T a b l e - 6 8 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 7 8 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K MB ON N S N B P E N F H o s p i t a l 0 0 . 2 2 . 0 0 . 8 5 . 0 0 . 0 0 . 1 5 . 0 0 . 0 0 1 . 2 2 C o l l e g e 6 3 . 0 0 . 0 0 . 0 . 0 3 5 . 0 0 ' . 0 0 . 0 0 . 0 0 . 6 6 5 U n i v e r 2 7 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 2 7 T e c h I n s t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 T O T A L . 9 0 . 2 2 . 0 0 . 8 5 . 0 3 5 . 0 0 . 1 5 . 0 0 . 0 0 2 . 1 5 5 203 D u r i n g 1 9 7 8 t h e g r e a t e s t n u m b e r o f g r i e v a n c e s l a u n c h e d b y s t u d e n t s i n n u r s i n g p r o g r a m s w e r e i n h o s p i t a l p r o g r a m s i n M a n i t o b a , f o l l o w e d b y c o l l e g e p r o g r a m s i n B r i t i s h C o l u m b i a . B r i t i s h C o l u m b i a w a s a l s o t h e o n l y p r o v i n c e r e p o r t i n g g r i e v a n c e s i n u n i v e r s i t y p r o g r a m s d u r i n g t h i s y e a r . H o w e v e r , t h e o v e r a l l r a t e o f c a s e s w a s o n l y 2 . 1 6 p e r 1 0 0 s t u d e n t e n r o l l m e n t s t h r o u g h o u t t h e r e p o r t i n g p r o g r a m s . T a b l e 6 9 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 7 9 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K MB ON N S N B P E N F C o l l e g e H o s p i t a l U n i v e r T e c h I n s t I n d e p e n d n t , 6 3 . 0 0 , 0 0 , 0 0 , 0 0 , 0 0 . 2 2 . 0 0 . 0 0 . 0 0 , 0 0 . 0 0 , 3 6 , 2 6 , 0 0 . 4 0 , 2 4 , 0 0 , 0 0 , 0 0 , 1 7 , 0 0 , 0 0 , 0 0 0 0 . 0 0 , 0 0 , 0 0 , 0 0 0 0 , 0 0 , 1 5 , 0 0 , 0 0 0 0 , 0 0 , 0 0 , 0 0 , 0 0 , 0 0 , 0 0 1 . 2 0 , 0 0 . 6 1 . 0 0 . 3 6 , 0 0 . 2 6 0 0 . 0 0 T O T A L , 6 3 . 2 2 6 2 . 6 4 1 7 , 0 0 . 1 5 . 0 0 . 0 0 2 . 4 3 C o l l e g e p r o g r a m s s h o w e d t w i c e t h e i n c i d e n c e o f g r i e v a n c e s o f h o s p i t a l p r o g r a m s d u r i n g 1 9 7 9 . T h i s c h a n g e w a s a r e v e r s a l o f r a t e s f r o m t h e p r e v i o u s y e a r A g a i n t h e g r e a t e s t n u m b e r o f c a s e s w a s i n M a n i t o b a 204 p r o g r a m s . S a s k a t c h e w a n w a s t h e o n l y p r o v i n c e r e p o r t i n g c a s e s i n u n i v e r s i t y p r o g r a m s . T h e o v e r a l l r a t e o f c a s e s f o r t h i s y e a r w a s o n l y s l i g h t l y g r e a t e r ( . 2 7 ) t h a n i n t h e p r e v i o u s y e a r . T h e r a t e o f c a s e s d u r i n g 1 9 8 0 i n c r e a s e d b y 1 2 7 % f r o m t h e p r e v i o u s y e a r . T h i s i n c r e a s e w a s p r i m a r i l y d u e t o a s i g n i f i c a n t i n c r e a s e i n t h e r a t e o f c a s e s i n S a s k a t c h e w a n ' s u n i v e r s i t y p r o g r a m s . B o t h t h e o v e r a l l c o l l e g e a n d h o s p i t a l p r o g r a m s a l s o s h o w e d i n c r e a s e s . T h i s y e a r w a s a l s o t h e f i r s t y e a r t h a t N e w B r u n s w i c k ' s i n d e p e n d e n t p r o g r a m s r e p o r t e d c a s e s . T a b l e 7 0 . - - . R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 8 0 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K MB ON N S N B P E N F U n i v e r . 2 7 . 0 0 2 . 5 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 2 . 7 7 C o l l e g e . 8 4 . 0 0 . 0 0 . 4 0 . 1 0 . 0 0 . 0 0 . 0 0 . 0 0 1 . 3 4 H o s p i t a l . 0 0 . 4 4 . 0 0 . 1 2 . 0 0 . 0 0 . 2 9 . 0 0 . 0 0 . 8 5 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 5 5 . 0 0 . 0 0 . 0 0 . 5 5 T e c h I n s t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 T O T A L 1 . 1 1 . 4 4 2 . 5 0 . 5 2 . 1 0 . 5 5 . 2 9 . 0 0 . 0 0 5 . 5 1 2 0 5 T h e r a t e o f c a s e s d u r i n g 1 9 8 1 d e c r e a s e d b y 5 5 % f r o m t h e p r e v i o u s y e a r . A l s o , d u r i n g t h i s y e a r , b o t h B r i t i s h C o l u m b i a ' s a n d M a n i t o b a ' s c o l l e g e p r o g r a m s h a d t h e s a m e r a t e o f c a s e s a s i n t h e p r e v i o u s y e a r . 1 9 8 1 w a s a l s o t h e f i r s t y e a r t h a t N o v a S c o t i a ' s u n i v e r s i t y p r o g r a m s r e p o r t e d c a s e s . T a b l e 7 1 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 8 1 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K MB ON N S N B P E N F C o l 1 e g e . 8 4 . 0 0 . 0 0 . 4 0 . 1 4 . 0 0 . 0 0 . 0 0 . 0 0 1 . 3 8 H o s p i t a l . 0 0 . 4 4 . 0 0 . 1 2 . 0 0 . 0 0 . 1 5 . 0 0 . 0 0 7 1 U n i v e r . 2 7 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 3 1 . 0 0 . 0 0 5 8 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 3 6 . 0 0 . 0 0 . 0 0 3 6 T e c h I n s t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 • 0 0 T O T A L 1 . 1 1 . 4 4 . 0 0 . 5 2 . 1 4 . 3 6 . 4 6 . 0 0 . 0 0 3 . 0 3 1 9 8 2 m a r k e d t h e h i g h e s t r a t e o f c a s e s t h r o u g h o u t t h e e i g h t y e a r s s t u d i e d . T h e m o s t s i g n i f i c a n t i n c r e a s e w a s i n u n i v e r s i t y p r o g r a m s , w i t h t h e h i g h e s t r a t e b e i n g f o u n d i n N e w f o u n d l a n d ' s p r o g r a m s . R a t e s o f c a s e s i n t h e w e s t e r n p r o v i n c e s d u r i n g 1 9 8 2 c o n t i n u e d t o b e a b o v e t h o s e o f O n t a r i o a n d t h e A t l a n t i c p r o v i n c e s . T h e s e w e s t e r n r a t e s c o n t r i b u t e d t o a n o v e r a l l i n c r e a s e d r a t e 206 o f 1 5 7 % o v e r t h e p r e v i o u s y e a r , b u t t h i s r a t e w a s o n l y 8 7 % o f t h a t d u r i n g 1 9 8 0 . D u r i n g t h i s y e a r u n i v e r s i t y p r o g r a m s a l s o s h o w e d a n i n c r e a s e i n r a t e s a l m o s t e q u a l t o t h a t o f c o l l e g e p r o g r a m s . T a b l e 7 2 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 8 2 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K M B ON N S N B P E N F C o l l e g e . 4 2 . 5 9 . 0 0 . 4 0 . 2 8 . 0 0 . 0 0 . 0 0 . 0 0 1 . 6 9 U n i v e r . 5 5 . 0 0 . 7 1 . 3 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 1 . 5 6 T e c h I n s t . 7 8 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 7 8 H o s p i t a l . 0 0 . 4 4 . 0 0 . 1 2 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 5 6 I n d e p e n d n t . 0 0 . 0 0 . 0 . 0 0 . 0 0 . 1 8 . 0 0 . 0 0 . 0 0 . 1 8 T O T A L 1 . 7 5 1 . 0 3 . 7 1 . 8 2 . 2 8 . 1 8 . 0 0 . 0 0 . 0 0 4 . 7 7 D u r i n g 1 9 8 3 h o s p i t a l p r o g r a m s a l s o s h o w e d a n i n c r e a s e , w i t h N e w f o u n d l a n d r e p o r t i n g i t s f i r s t h o s p i t a l p r o g r a m c a s e . 207 T a b l e 7 3 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 8 3 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K MB ON N S N B P E N F U n i v e r . 8 2 . 0 0 . 3 6 . 6 1 . 2 2 . 0 0 . 9 2 . 0 0 . 9 8 3 . 9 1 C o l l e g e . 4 2 . 5 9 . 0 0 . 4 0 . 2 4 . 0 0 . 0 0 . 0 0 . 0 0 1 . 6 5 H o s p i t a l . 0 0 . 2 2 . 0 0 . 2 4 . 0 0 . 0 0 . 2 9 . 0 0 . 3 3 1 . 0 8 T e c h I n s t . 3 9 . 0 0 . 2 6 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 6 5 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 3 6 . 0 0 . 0 0 . 0 0 . 3 6 T O T A L 1 . 6 3 . 8 1 . 6 2 1 . 2 5 . 4 6 . 3 6 1 . 2 1 . 0 0 1 . 3 1 7 . 6 5 * M u l t i p l e r e s p o n s e s a r e r e q u e s t e d . N u m b e r o f p r o g r a m s i s 8 1 . T a b l e 7 4 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 8 4 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K M B ON N S N B P E N F C o l l e g e . 2 1 . 5 9 . 0 0 . 8 0 . 4 5 . 0 0 . 0 0 . 0 0 . 0 0 2 . 0 5 H o s p i t a l . 0 0 . 4 4 . 0 0 . 4 9 . 0 0 . 0 0 . 4 4 . 0 0 . 3 3 1 . 7 0 U n i v e r . 5 5 . 0 0 . 0 0 . 3 0 . 2 2 . 0 0 . 3 1 . 0 0 . 0 0 1 . 3 8 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 5 5 . 0 0 . 5 9 . 0 0 1 . 1 4 T e c h I n s t . 3 9 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 3 9 T O T A L 1 . 1 5 1 . 0 3 . 0 0 1 . 5 9 . 6 7 . 5 5 . 7 5 . 5 . 3 3 6 . 6 6 T h e o v e r a l l r a t e o f c a s e s d u r i n g 1 9 8 4 r e p r e s e n t e d o n l y 8 7 % o f t h e r a t e f o r 1 9 8 3 . T h e r a t e o f c a s e s i n u n i v e r s i t y p r o g r a m s a p p e a r e d t o l e v e l o f f w h i l e t h e r e w a s a c o n t i n u i n g i n c r e a s e i n t h e r a t e o f c a s e s , w i t h i n 2 0 8 b o t h h o s p i t a l a n d c o l l e g e p r o g r a m s . M a n i t o b a a g a i n s h o w e d t h e h i g h e s t r a t e o f c a s e s . T a b l e 7 5 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n 1 9 8 5 T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K M B ON N S N B P E N F H o s p i t a l . 0 0 . 0 0 . 0 0 . 7 3 . 0 0 . 0 0 . 1 5 . 0 0 . 3 3 1 . 2 1 U n i v e r . 0 0 . 0 0 . 0 0 . 0 0 . 1 1 . 0 0 . 0 0 . 0 0 . 9 8 1 . 0 9 C o l l e g e . 0 0 . 0 0 . 0 0 . 0 0 . 2 8 . 0 0 . 0 0 . 0 0 . 0 0 . 2 8 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 1 . 0 0 . 0 0 . 0 0 . 1 8 T e c h I n s t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 T O T A L . 0 0 . 0 0 . 0 0 . 7 3 . 3 9 . 1 8 . 1 5 . 0 0 1 . 3 1 2 . 7 6 T h e 1 9 8 5 d a t a w e r e n o t r e q u e s t e d f o r t h i s s t u d y ; h o w e v e r , s o m e - p r o g r a m s p r o v i d e d i n f o r m a t i o n r e l a t e d t o c a s e s c a r r i e d o u t d u r i n g 1 9 8 5 . T h u s , t h e o v e r a l l r a t e c a n n o t b e c o m p a r e d w i t h a l l t h e p r o g r a m s r e p o r t i n g c a s e s d u r i n g t h e p r e v i o u s y e a r s . C a s e s p r o v i d e d f o r w h i c h t h e y e a r w a s n o t s p e c i f i e d a r e s h o w n i n T a b l e 7 6 . T h e h i g h e s t r a t e o f c a s e s f a l l s w i t h i n t h e u n i v e r s i t y p r o g r a m s . 209 T a b l e 7 6 . - - R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n U n s p e c i f i e d Y e a r s T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K M B ON N S N B P E N F H o s p i t a l . 0 0 . 2 2 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 2 2 C o l l e g e . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 T e c h I n s t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 U n i v e r . 0 0 . 4 3 . 0 0 . 0 0 . 2 2 . 0 0 . 0 0 . 0 0 . 4 9 1 . 1 4 I n d e p e n d n t . 0 0 . 0 0 . 0 0 . 0 0 . 0 0 . 3 6 . 0 0 . 0 0 . 0 0 . 3 6 T O T A L . 0 0 . 6 5 . 0 0 . 0 0 . 2 2 . 3 6 . 0 0 . 0 0 . 4 9 1 . 7 2 T a b l e 7 7 p r o v i d e s a s u m m a r y o f t h e r a t e s o f c a s e s f o r a l l e i g h t y e a r s . T a b l e 7 7 . - - : R a t e o f C a s e s p e r 1 0 0 S t u d e n t E n r o l l m e n t s i n A l l Y e a r s T Y P E O F P R O V I N C E T O T A L I N S T I T U T I O N B C A B S K MB ON N S N B P E N F U n i v e r 2 . 7 . 4 3 . 9 1 . 2 . 8 . 0 1 . 5 . 0 2 . 5 1 3 . 1 C o l l e g e 4 . 0 1 . 8 . 0 2 . 8 1 . 7 . 0 . 0 . 0 . 0 1 0 . 3 H o s p i t a l . 0 2 . 6 . 0 2 . 9 . 0 . 0 1 . 6 . 0 1 . 0 8 . 2 I n d e p e n d n t . 0 . 0 . 0 . 0 . 0 2 . 5 . 0 . 6 . 0 3 . 1 T e c h I n s t 1 . 6 . 0 . 5 . 0 . 0 . 0 . 0 . 0 . 0 2 . 1 T O T A L 8 . 3 4 . 8 4 . 5 6 . 9 2 . 5 2 . 5 3 . 2 . 6 3 . 4 3 6 . 7 U n i v e r s i t y p r o g r a m s p r e s e n t e d t h e h i g h e s t i n c i d e n c e o f r e p o r t e d s t u d e n t g r i e v a n c e s , f o l l o w e d b y 210 c o l l e g e p r o g r a m s . T h u s , b a s e d on t h e r e p o r t s p r o v i d e d by r e s p o n d e n t s t o t h i s s u r v e y , t h e o v e r a l l r a t e o f c a s e s p e r 100 s t u d e n t e n r o l l m e n t s over t h e e i g h t y e a r p e r i o d was 36.68 or 4.59 p e r y e a r , w i t h t h e h i g h e s t r a t e b e i n g i n u n i v e r s i t y programs and t h e l o w e s t i n t e c h n i c a l i n s t i t u t e s . B r i t i s h C o l u m b i a was t h e p r o v i n c e w i t h t h e h i g h e s t r a t e o f c a s e s , f o l l o w e d by M a n i t o b a , A l b e r t a , and S a s k a t c h e w a n . The l o w e s t r a t e was i n P r i n c e Edward I s l a n d w i t h an o v e r a l l mean o f 4.07. T h u s , t h e w e s t e r n p r o v i n c e s showed r a t e s o f c a s e s above t h e mean w i t h t h e r e m a i n i n g p r o v i n c e s p r e s e n t i n g r a t e s o f c a s e s below t h e mean. However, s i n c e t h e s e f i n d i n g s r e p r e s e n t a h a p h a z a r d sample t h e y c a n o n l y be l i m i t e d t o t h e c a s e s p r o v i d e d as t h e y do n o t r e p r e s e n t a t o t a l p o p u l a t i o n f o r a l l programs i n t h e n i n e p r o v i n c e s d u r i n g t h e i n t e r v a l f r o m 1978 t h r o u g h 1985. R e l i a b i l i t y and V a l i d i t y o f t h e I n s t r u m e n t . A s s e s s m e n t o f t h e r e l i a b i l i t y and v a l i d i t y o f t h e d a t a o b t a i n e d u s i n g t h i s s e c o n d i n s t r u m e n t was l i m i t e d t o t h a t o f t h e r e l a t i o n s h i p s between v a r i a b l e s o f : p r o v i n c e , t y p e o f i n s t i t u t i o n , number o f c a s e s , l e v e l s o f r e v i e w , and outcome o f r e v i e w s . T h i s l i m i t a t i o n was n e c e s s a r y due 211 to the haphazard sample of the data as d i s c u s s e d p r e v i o u s l y i n t h i s chapter. C h i square w i t h a Yates c o r r e c t i o n was used to determine whether or not the r a t e s of cases by type of i n s t i t u t i o n were s i m i l a r throughout the p r o v i n c e s . The Yates c o r r e c t i o n was r e q u i r e d as numbers w i t h i n many of the c e l l s were l e s s than f i v e . The outcome was r e p o r t e d u s i n g a .05 l e v e l o f s i g n i f i c a n c e . Table 78 o u t l i n e s the f i n d i n g s by type of program. Tab l e 78. -- S i m i l a r i t y i n Rate of Cases Across the P r o v i n c e s by Type of I n s t i t u t i o n TYPE OF RATE OF CASES x*+ YATES x*@ 8df + .05 INSTITUTION 7100 ENROLLM'T CORRECTION LEVEL OF SIGNIFICANCE A l l types of I n s t i t u t i o n s 36, .68 4 .92 15, .51 U n i v e r s i t y 13, .06 13 .81 15, .51 C o l l e g e 10, .25 15 .•69 15, .51 H o s p i t a l 8, .16 22 .04 15, .51 Independent Sch 3, .13 28 .58 15, .51 T e c h n i c a l I n s t 2, .08 116 .73 15, .51 The p r o v i n c i a l r a t e s i n a l l programs w i t h the e x c e p t i o n of u n i v e r s i t y - b a s e d programs showed s t a t i s t i c a l l y s i g n i f i c a n t d i f f e r e n c e s . T h e r e f o r e , 212 t h e r e i s a d i f f e r e n c e i n t h e r a t e o f c a s e s among t h e v a r i o u s p r o v i n c e s f o r h o s p i t a l - b a s e d , t e c h n i c a l i n s t i t u t e ^ b a s e d , c o l l e g e - b a s e d , and i n d e p e n d e n t s c h o o l * b a s e d programs as r e p o r t e d . T h e r e i s not a s t a t i s t i c a l l y s i g n i f i c a n t d i f f e r e n c e i n t h e r a t e o f c a s e s a c r o s s t h e p r o v i n c e s f o r u n i v e r s i t y - b a s e d p r o g r a m s . A c o n c l u s i o n c a n be drawn t h a t t h e r a t e o f g r i e v a n c e and a p p e a l s f o r s t u d e n t s i n u n i v e r s i t y - b a s e d p r ograms i s s i m i l a r i n a l l o f t h e p r o v i n c e s . T h i s i s an a n t i c i p a t e d outcome as a l l b u t one o f t h e p r o v i n c e s ( P r i n c e Edward I s l a n d ) p r o v i d e n u r s i n g programs i n t h e s e s e t t i n g s . I n c o n t r a s t , t e c h n i c a l i n s t i t u t e programs showed a l a r g e (116.73) s t a t i s t i c a l l y s i g n i f i c a n t d i f f e r e n c e i n t h e r a t e o f s t u d e n t c l i n i c a l e v a l u a t i o n g r i e v a n c e s b e t w e e n t h e v a r i o u s p r o v i n c e s . T h i s i s an a n t i c i p a t e d outcome as o n l y t h r e e o f t h e p r o v i n c e s ( B r i t i s h C o l u m b i a , S a s k a t c h e w a n , and O n t a r i o ) p r o v i d e n u r s i n g p r ograms i n t h e s e i n s t i t u t i o n s . When a l l t y p e s o f programs were a s s e s s e d t h r o u g h o u t t h e n i n e p r o v i n c e s , t h e c h i s q u a r e w i t h a Y a t e s c o r r e c t i o n showed no s t a t i s t i c a l l y s i g n i f i c a n t 213 d i f f e r e n c e i n the r a t e o f cases among the p r o v i n c e s . Thus, i t can be assumed, based on the cases a s s e s s e d , t h a t the r a t e o f cases o f s t u d e n t c l i n i c a l e v a l u a t i o n g r i e v a n c e s i s s u f f i c i e n t l y s i m i l a r t h a t i t can be s a i d t h a t they occur as f r e q u e n t l y i n one p r o v i n c e as i n a n o t h e r . Summary I n c o n c l u s i o n , s t u d e n t s more f r e q u e n t l y sought f o r m a l a p p e a l h e a r i n g s i n o r d e r t o have t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s r e v i e w e d than they d i d i n f o r m a l g r i e v a n c e r e v i e w s . An even s m a l l e r number o f s t u d e n t s p a r t i c i p a t e d i n i n s t i t u t i o n a l s t u d e n t a p p e a l s . T a b l e 79 p r o v i d e s a summary o f the f r e q u e n c y w i t h w h i c h d e c i s i o n s were e i t h e r u p h e l d or m o d i f i e d by type o f i n s t i t u t i o n . S t u d e n t s i n u n i v e r s i t y n u r s i n g programs sought r e v i e w s o f t h e i r c l i n i c a l e v a l u a t i v e d e c i s i o n s more f r e q u e n t l y than i n any o t h e r type o f programs f o l l o w e d by s t u d e n t s i n c o l l e g e programs, h o s p i t a l programs, and independent s c h o o l programs. The s m a l l e s t number o f s t u d e n t s r e q u e s t i n g such r e v i e w s were i n t e c h n i c a l i n s t i t u t e programs. 214 T a b l e 79. Summary o f R e v i e w s or H e a r i n g s i n a l l T y p e s o f I n s t i t u t i o n s T h r o u g h o u t t h e P r o v i n c e s TYPE OF REVIEW TYPE OF INSTITUTION DECISION TOTAL H C T I U 0 UPHELD MODIF'D NO % NO % A p p e a l H e a r i n g 49 55 7 34 11 96 61.5 60 38.5 156 G r i e v a n c e R eview 36 54 6 28 11 120 88.9 15 11.1 135 I n s t i t u t i o n a l S t u d e n t A p p e a l 2 10 1 6 1 13 68.4 7 35.0 20 E x t e r n a l A p p e a l 1 6 2 0 1 10100.0 0 00.0 10 TOTAL 88 125 16 68 24 239 79.7 82 21.2 321 I n g r i e v a n c e r e v i e w s , t h e i n i t i a l c l i n i c a l e v a l u a t i v e d e c i s i o n s were u p h e l d i n more t h a n n i n e 1 ^ t e n t h s o f t h e c a s e s and m o d i f i e d i n o n l y s l i g h t l y more t h a n o n e - t e n t h o f t h e c a s e s . However, a t b o t h t h e a p p e a l h e a r i n g and i n s t i t u t i o n a l s t u d e n t a p p e a l l e v e l s t h e s e d e c i s i o n s were m o d i f i e d i n more t h a n o n e - t h i r d o f t h e c a s e s . E x t e r n a l a p p e a l s d i d n o t r e s u l t i n any d e c i s i o n s b e i n g m o d i f i e d . T h u s , b a s e d on t h e c a s e s r e p o r t e d , s t u d e n t s were n o t s u c c e s s f u l i n h a v i n g t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s m o d i f i e d t h r o u g h e x t e r n a l a p p e a l s . 215 C H A P T E R 8 S U M M A R Y , R E C O M M E N D A T I O N S , A N D C O N C L U S I O N S S u m m a r y T h e s t u d y w a s u n d e r t a k e n t o d e t e r m i n e t h e p r o c e s s e s u s e d b y n u r s e e d u c a t o r s d u r i n g c l i n i c a l e v a l u a t i o n s o f s t u d e n t s ' p e r f o r m a n c e a n d t h e s y s t e m s a v a i l a b l e i n t h e s e s a m e p r o g r a m s a n d i n s t i t u t i o n s w h i c h s t u d e n t s c a n a c c e s s i n t h e e v e n t t h a t t h e y w i s h t o d i s p u t e t h e s e e v a l u a t i o n s . I n a d d i t i o n , t h e s t u d y w a s d e s i g n e d t o o b t a i n d a t a c o n c e r n i n g t h e i n c i d e n c e a n d o u t c o m e s o f s . u c h g r i e v a n c e a n d a p p e a l h e a r i n g s i n c l u d i n g a n y l i t i g a t i o n w h i c h h a d o c c u r r e d d u r i n g t h e p e r i o d f r o m 1 9 7 8 t o 1 9 8 4 . P r o t o t y p i c m o d e l s d e v e l o p e d f o r t h i s s t u d y e v o l v e d f r o m t h e l i t e r a t u r e r e v i e w e d . D a t a c o l l e c t e d w e r e a n a l y z e d t o d e t e r m i n e w h e t h e r o r n o t t h e s e m o d e l s w e r e r e f l e c t i v e o f a c t u a l p r a c t i c e s w i t h i n t h e e d u c a t i o n a l i n s t i t u t i o n s p r o v i d i n g n u r s i n g e d u c a t i o n p r o g r a m s . T h e l i t e r a t u r e a l s o p r o v i d e d i n f o r m a t i o n p e r t a i n i n g t o d e c i s i o n - m a k i n g p r a c t i c e s i n e d u c a t i o n a l i n s t i t u t i o n s 216 a n d n u r s i n g p r o g r a m s . D a t a w e r e c o l l e c t e d t o d e t e r m i n e w h a t a r e n u r s i n g p r o g r a m s ' d e c i s i o n - m a k i n g p r a c t i c e s c o n c e r n i n g n u r s i n g s t u d e n t s ' ' c l i n i c a l e v a l u a t i o n d e c i s i o n s . A t o t a l p o p u l a t i o n ( N=94) o f C a n a d i a n n u r s i n g p r o g r a m s p r e p a r i n g s t u d e n t s f o r n u r s i n g r e g i s t r a t i o n e x a m i n a t i o n s w a s i n c l u d e d ( w i t h t h e e x c e p t i o n o f Q u e b e c p r o g r a m s b e c a u s e o f t h e p o t e n t i a l v a r i a t i o n b e t w e e n l e g a l i n t e r p r e t a t i o n s o f a d m i n i s t r a t i v e l a w a s d i s c u s s e d i n C h a p t e r 1 ) . A d e s c r i p t i v e s u r v e y u s i n g a c r o s s - s e c t i o n a l d e s i g n w a s c h o s e n t o p r o v i d e d a t a c o n c e r n i n g t h e c u r r e n t p r a c t i c e s f o r c l i n i c a l e v a l u a t i o n o f s t u d e n t s . T w o i n s t r u m e n t s w e r e d e v e l o p e d t o o b t a i n t h e d a t a f o r t h i s s t u d y . T h e f i r s t i n s t r u m e n t w a s i n t e n d e d t o a s s e s s t h e c l i n i c a l e v a l u a t i o n p r a c t i c e s a n d p r o c e d u r e s u s e d i n p r o g r a m s a s w e l l a s t h e v a r i o u s l e v e l s o f i n f o r m a l a n d f o r m a l r e v i e w s a v a i l a b l e t o s t u d e n t s i n t h e s e p r o g r a m s . Q u e s t i o n s w e r e s t r u c t u r e d t o o b t a i n d a t a p e r t a i n i n g t o f o u r l e v e l s o f r e v i e w w i t h i n t h e i n s t i t u t i o n s s t u d i e d . T h e s e c o n d i n s t r u m e n t w a s i n t e n d e d t o a s s e s s t h e i n c i d e n c e o f g r i e v a n c e s a n d 217 a p p e a l s r e g a r d i n g c l i n i c a l e v a l u a t i o n d e c i s i o n s b r o u g h t a g a i n s t n u r s i n g f a c u l t y b y n u r s i n g s t u d e n t s f o r t h e p e r i o d f r o m 1 9 7 8 u n t i l 1 9 8 4 . A s e t o f t h e s e t w o i n s t r u m e n t s w a s m a i l e d t o t h e h e a d s o f n u r s i n g p r o g r a m s i n t h i s s t u d y ' s p o p u l a t i o n . T h r e e f o l l o w - u p s t o t h e i n i t i a l m a i l i n g w e r e u s e d . R e s p o n d e n t s w e r e a l s o r e q u e s t e d t o p r o v i d e a n y w r i t t e n p o l i c i e s o r p r o c e d u r e s r e l a t e d t o s t u d e n t c l i n i c a l e v a l u a t i o n , a s w e l l a s t o g r i e v a n c e a n d a p p e a l h e a r i n g s . F i n d i n g s I n s t r u m e n t 1 . - - T h e r e s p o n s e r a t e t o t h e s u r v e y w a s 8 6 . 2 % ( 8 1 / 9 4 p r o g r a m s ) . O v e r a l l , t h e r e w e r e f i v e m a j o r f i n d i n g s : 1 . T h e r e i s g e n e r a l l y a l a c k o f s t a n d a r d s o r g u i d e l i n e s f o r f a c u l t y e v a l u a t i o n s o f s t u d e n t s i n c l i n i c a l s e t t i n g s . 2 . I n o n e - t h i r d o f t h e p r o g r a m s a c l i n i c a l i n s t r u c t o r a l o n e m a k e s a s t u d e n t ' s c l i n i c a l e v a l u a t i v e d e c i s i o n . 3 . I n s o m e o f t h e p r o g r a m s t h e s a m e m e m b e r s s e r v e o n m o r e t h a n o n e l e v e l o f r e v i e w s . 218 4. P r o c e d u r e s e m p l o y e d i n t h e c o n d u c t i n g o f i n f o r m a l a n d f o r m a l h e a r i n g s a r e r a r e l y w r i t t e n . 5 . G r i e v a n c e a n d a p p e a l p a n e l s t e n d t o a l t e r p r o f e s s i o n a l j u d g m e n t s o f n u r s e f a c u l t y e v e n t h r o u g h p a n e l m e m b e r s f r e q u e n t l y a r e n o n - n u r s e s . I n s t r u m e n t 2 - - T h e r e w e r e 2 0 5 r e p o r t s o f s t u d e n t i n i t i a t e d g r i e v a n c e s o r a p p e a l s p r o v i d e d b y t h e r e s p o n d e n t s . N e v e r t h e l e s s , n o t a l l p r o g r a m s p r o v i d e d d a t a c o n c e r n i n g s u c h r e v i e w s w h i l e o t h e r p r o g r a m s o n l y p r o v i d e d a s a m p l e o f t h e m . T h u s , t h e r e s u l t s c a n o n l y b e i n t e r p r e t e d i n r e l a t i o n t o t h e r e p o r t e d c a s e s a n d c a n n o t b e g e n e r a l i z e d t o o t h e r p r o g r a m s . W h e n s t u d e n t s ' g r i e v a n c e s a b o u t t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s w e r e t a k e n b e f o r e g r i e v a n c e r e v i e w p a n e l s ( t h e s e p a n e l s r e p r e s e n t t h e f i r s t i n f o r m a l l e v e l o f r e v i e w w i t h i n t h e p r o g r a m ) o n l y 1 1 . 1 % ( 1 5 / 1 3 5 ) o f t h e d e c i s i o n s w e r e m o d i f i e d . I n c o n t r a s t , a p p e a l h e a r i n g p a n e l s ( t h e s e p a n e l s r e p r e s e n t t h e f i r s t f o r m a l l e v e l o f r e v i e w w i t h i n t h e i n s t i t u t i o n ) m o d i f i e d 4 4 . 4 % ( 6 0 / 1 3 5 ) o f t h e d e c i s i o n s . S t i l l , i f s t u d e n t s c h o s e t o r e q u e s t a r e v i e w o f t h e i r e v a l u a t i o n d e c i s i o n t o i n s t i t u t i o n a l s t u d e n t a p p e a l p a n e l s ( t h e s e p a n e l s 219 r e p r e s e n t t h e f i n a l f o r m a l l e v e l o f r e v i e w i n t h e i n s t i t u t i o n ) 3 5 . 0 % ( 7 / 2 0 ) o f t h e s e d e c i s i o n s w e r e m o d i f i e d . T h e l i m i t e d n u m b e r o f s t u d e n t s ( 1 0 ) w h o s u b s e q u e n t l y s o u g h t r e v i e w s o f t h e s e n u r s i n g f a c u l t y d e c i s i o n s t h r o u g h e x t e r n a l a g e n c i e s s u c h a s t h e c o u r t s , f o u n d t h a t t h e i r r a t e o f s u c c e s s i n h a v i n g t h e d e c i s i o n s m o d i f i e d w a s z e r o ( t h a t i s , o f t h o s e c a s e s w h i c h w e r e h e a r d i n c o u r t ) . 220 I n t e r p r e t a t i o n o f F i n d i n g s W h e n p o l i c i e s a n d p r o c e d u r e s ( p r o v i d e d b y r e s p o n d e n t s ) c o n c e r n i n g n u r s i n g p r o g r a m s ' c l i n i c a l e v a l u a t i o n p r a c t i c e s w e r e a n a l y z e d , t h e r e w a s l i t t l e e v i d e n c e t h a t p o l i c i e s a n d p r o c e d u r e s r e p o r t e d t o b e w r i t t e n b y 7 8 o u t o f 8 1 r e s p o n d e n t s w e r e a c t u a l l y i n a w r i t t e n f o r m . T h u s , t h e s e p r o g r a m s d i d n o t s e e m t o h a v e c l e a r , o b j e c t i v e , a n d f o r m a l l y r e c o r d e d s t a n d a r d s a g a i n s t w h i c h f a c u l t y m e a s u r e d s t u d e n t s ' p e r f o r m a n c e . T h i s f i n d i n g c o u l d b e i n t e r p r e t e d t o i m p l y t h a t t h e m e a s u r e m e n t o f s t u d e n t s ' c l i n i c a l p e r f o r m a n c e w a s t o t a l l y d e p e n d e n t o n t h e p e r s o n a l i n t e r p r e t a t i o n o f s t u d e n t s ' ' p e r f o r m a n c e a g a i n s t t h e c l i n i c a l i n s t r u c t o r s ' i n t e r p r e t a t i o n o f t h e c o u r s e o b j e c t i v e s . T h i s l e v e l o f s u b j e c t i v i t y c o u l d s u p p o r t s t u d e n t s ' " c h a r g e s o f b i a s e d e v a l u a t i o n s . T h e p r a c t i c e i n d i c a t e s a n e e d f o r c l i n i c a l e v a l u a t i v e s t a n d a r d s t o b e d e v e l o p e d a n d u s e d b y c l i n i c a l i n s t r u c t o r s d u r i n g t h e c l i n i c a l e v a l u a t i o n p r o c e s s . A f u r t h e r c o n c e r n r e g a r d i n g t h e f a i r n e s s o f a p p r a i s a l s r e l a t e s t o t h e f i n d i n g t h a t i n o n e - t h i r d o f t h e p r o g r a m s a s i n g l e i n s t r u c t o r m a k e s t h e d e c i s i o n a s t o w h e t h e r o r n o t s t u d e n t s p a s s t h e i r c l i n i c a l c o u r s e s . 221 o b j e c t i v e a p p r a i s a l s o f t h e s e s t u d e n t s u n d e r t a k e n by o t h e r i n s t r u c t o r s . E i t h e r o f t h e s e f a c t o r s c o u l d l e a d t o s t u d e n t s c h a r g i n g t h a t t h e i r e v a l u a t i o n s were b i a s e d and u n f a i r . I n o r d e r t o overcome t h e above p r o b l e m s De T o r n y a y r e p o r t e d t h a t a sound p o l i c y t o a d o p t f o r a s s e s s i n g f a i l i n g s t u d e n t s was, " t h a t e v e r y s t u d e n t be e v a l u a t e d by a s e c o n d i n s t r u c t o r b e f o r e f a i l i n g a c l i n i c a l c o u r s e " (1985, 3 1 3 ) . The u s e o f an i m p a r t i a l i n s t r u c t o r who e v a l u a t e s t h e s t u d e n t i n d e p e n d e n t l y i n t h e c l i n i c a l a r e a , was r e p o r t e d by o n l y t h r e e r e s p o n d e n t s . R e s p o n d e n t s a l s o r e p o r t e d t h a t , i n most c a s e s , t h e h e a d s o f t h e n u r s i n g programs were i n v o l v e d i n d e c i s i o n s r e g a r d i n g s t u d e n t s ' c l i n i c a l p e r f o r m a n c e and t h a t t h e s e p r o g r a m heads a l s o s e r v e d on b o t h g r i e v a n c e r e v i e w and a p p e a l h e a r i n g p a n e l s . B e c a u s e o f t h e s e i n d i v i d u a l s ' r e s p o n s i b i l i t y f o r t h e p e r f o r m a n c e o f i n s t r u c t o r s , i t i s a p p r o p r i a t e t h a t t h e i r i n p u t i s s o u g h t d u r i n g t h e f o r m u l a t i o n o f t h e d e c i s i o n r e g a r d i n g s t u d e n t s ' c l i n i c a l e v a l u a t i o n . N o t w i t h s t a n d i n g , i f t h e s e h e ads o f n u r s i n g programs had a l r e a d y s a t i n judgment on t h e i n i t i a l e v a l u a t i o n d e c i s i o n , t h e n b i a s c o u l d be r e a d i l y c h a r g e d by s t u d e n t s s h o u l d t h e s e same 222 i n d i v i d u a l s s i t on s u b s e q u e n t r e v i e w p a n e l s . E a c h f o l l o w i n g l e v e l o f r e v i e w s h o u l d have p a n e l s w i t h o u t an " o v e r l a p " o f members and e a c h p a n e l membership s h o u l d r e p r e s e n t a h i g h e r l e v e l o f t h e a d m i n i s t r a t i o n w i t h i n t h e i n s t i t u t i o n s . T a b l e 80. •> - Head o f N u r s i n g P r o g r a m as Member o f H e a r i n g or R e v i e w P a n e l s PROGRAM REVIEW GRIEVANCE REVIEW APPEAL HEARING INSTITUTIONAL STUDENT APPEAL PROGRAM REVIEW 10 2 3 0 GRIEVANCE REVIEW 2 6 1 0 APPEAL HEARING 3 0 31 0 I N S T I T ' L STUDENT APPEAL 0 0 0 0 I n a t o t a l o f s i x programs t h e he a d o f t h e n u r s i n g p r o g r a m was a member o f more t h a n one r e v i e w o f h e a r i n g p a n e l . Membership on b o t h t h e program r e v i e w and t h e g r i e v a n c e r e v i e w p a n e l s o c c u r r e d i n two p r o g r a m s . 223 Three o t h e r programs r e p o r t e d t h a t t h i s i n d i v i d u a l s e r v e d on b o t h the program r e v i e w and the a p p e a l h e a r i n g p a n e l s and a s i n g l e program r e p o r t e d membership on b o t h t h e g r i e v a n c e r e v i e w and a p p e a l h e a r i n g p a n e l s . I n s t i t u t i o n s need t o e v a l u a t e t h e i r t o t a l g r i e v a n c e and a p p e a l systems t o ensure t h a t the above b i a s does not o c c u r . F a i l u r e t o r e v i e w c u r r e n t s t r u c t u r e s f o r g r i e v a n c e and a p p e a l h e a r i n g s t o ensure t h a t each s u c c e s s i v e s e t o f p a n e l members i s t r u l y o b j e c t i v e c o u l d i n c r e a s e s t u d e n t l i t i g a t i o n t h r o u g h the c o u r t s based on charges o f u n f a i r and b i a s e d r e v i e w s w i t h i n i n s t i t u t i o n s . Respondents r e p o r t e d t h a t g r i e v a n c e r e v i e w s , a p p e a l h e a r i n g s , and i n s t i t u t i o n a l s t u d e n t a p p e a l s were p r i m a r i l y d i r e c t e d a t a r e v i e w o f the n a t u r a l j u s t i c e component ( t h e f a i r n e s s and r e a s o n a b l e n e s s o f the d e c i s i o n ) , and s e c o n d a r i l y a t t h e a d m i n i s t r a t i v e component ( t h e p o l i c i e s and p r o c e d u r e s f o l l o w e d ) . A l l r e v i e w s were l e s s concerned w i t h the academic component ( p r o f e s s i o n a l judgment) than w i t h the o t h e r two. The d i s c u s s i o n o f the Judgment Model i n Chapter 3 (69-78) p r o v i d e s a framework f o r the r e v i e w o f the 224 above t h r e e f o c i a t e a c h l e v e l o f r e v i e w . A t t h e g r i e v a n c e r e v i e w i t i s e x p e c t e d t h a t a l l t h r e e f o c i w o u l d be c o n s i d e r e d d u r i n g t h e d i s c u s s i o n s . R e s p o n d e n t s t o t h e s t u d y r e p o r t e d t h a t a l l t h r e e f o c i were c o n s i d e r e d i n 57.7% o f t h e p r o g r a m s . The model a l s o s u g g e s t s t h a t o n l y t h e " p r o c e d u r e s u s e d " and t h e " f a i r n e s s and r e a s o n a b l n e s s o f t h e d e c i s i o n " s h o u l d be c o n s i d e r e d a t b o t h t h e a p p e a l h e a r i n g and i n s t i t u t i o n a l s t u d e n t a p p e a l l e v e l s . R e s p o n d e n t s r e p o r t e d t h a t i n o n l y 18.8% o f programs s u c h d i r e c t i o n i s u s e d d u r i n g a p p e a l h e a r i n g s and i n o n l y 40% o f i n s t i t u t i o n a l s t u d e n t a p p e a l h e a r i n g s . R a s e d on r e s p o n s e s t o t h e s t u d y , two c o n c l u s i o n s c a n be r e a c h e d . E i t h e r t h e model i s n o t v a l i d or t h e r e i s a l a c k o f c l a r i t y as t o t h e r o l e s o f r e v i e w p a n e l s i n r e l a t i o n t o a s s e s s m e n t o f t h e f o c i . The l a t t e r c o n c l u s i o n c o u l d be d e m o n s t r a t e d by a p e r s i s t e n c e o f r e v i e w p a n e l s t o c o n t i n u e t o a s s e s s t h e a c a d e m i c component o f t h e d e c i s i o n s a t a l l l e v e l s e v e n t h o u g h p r o f e s s i o n a l n u r s i n g e x p e r t i s e may n o t be p r e s e n t on t h e s e p a n e l s . T a b l e 81. ̂ * C o m p a r i s o n o f Number o f F o c i R e v i e w s were D i r e c t e d a t f o r T h r e e L e v e l s o f H e a r i n g s GRIEVANCE REVIEW (N=78) APPEAL HEARING (N=64) INSTITUTIONAL STUDENT APPEAL (N=30) VALIDITY OF OBSERVATIONS + PROCEDURES USED + FAIRNESS 45 41 12 VALIDITY OF OBSERVATIONS + PROCEDURES 1 1 1 VALIDITY OF OBSERVATIONS + FAIRNESS 3 5 1 PROCEDURES + FAIRNESS 9 12 9 VALIDITY OF OBSERVATIONS 1 0 0 PROCEDURES 1 0 2 FAIRNESS 3 2 3 P o l i c i e s and p r o c e d u r e s ( p r o v i d e d by r e s p o n d e n t s ) f o r t h e v a r i o u s l e v e l s o f r e v i e w s f r e q u e n t l y p r o v i d e d g u i d e l i n e s f o r s t u d e n t s who w i s h e d t o i n i t i a t e s u c h 226 r e v i e w s i n c l u d i n g the time i n t e r v a l s v / i t h i n w h i c h they must e x e r c i s e the o p t i o n . R a r e l y , however, d i d these p o l i c i e s or p r o c e d u r e s p r o v i d e c l e a r g u i d e l i n e s f o r t h o s e c o n d u c t i n g t h e s e r e v i e w s . They f r e q u e n t l y o n l y s p e c i f i e d the c o m p o s i t i o n o f the r e v i e w p a n e l s and p r o v i d e d d i r e c t i o n t o the c h a i r t o ensure t h a t a l l documentation s u b m i t t e d was p r o v i d e d t o b o t h the s t u d e n t s and c l i n i c a l i n s t r u c t o r s i n v o l v e d i n the r e v i e w s . The absence o f f u r t h e r p r o c e s s g u i d e l i n e s can o b v i o u s l y r e s u l t i n a wide v a r i e t y o f p r a c t i c e s b e i n g e x e r c i s e d d u r i n g the conduct o f r e v i e w s . Such v a r i a t i o n s c o u l d i n v o l v e who i s i n t e r v i e w e d , what e v i d e n c e i s p r e s e n t e d , w h i c h w i t n e s s e s are c a l l e d , whether a d v i s o r s can accompany the g r i e v i n g s t u d e n t and h i s or her c l i n i c a l i n s t r u c t o r s , how the p r o c e e d i n g s a r e documented, and what a s p e c t s o f the judgment components members o f the p a n e l a d d r e s s . The outcome o f such v a r y i n g p a t t e r n s i s a g r e a t e r chance t h a t d e c i s i o n s made at t h i s l e v e l o f r e v i e w c o u l d be a l t e r e d a t h i g h e r l e v e l s o f r e v i e w . G e n e r a l l y , n u r s i n g programs p r o v i d e s t u d e n t s w i t h o p p o r t u n i t i e s t o q u e s t i o n e v a l u a t i v e d e c i s i o n s r e g a r d i n g t h e i r c l i n i c a l performance. Programs a l s o 227 commonly have p o l i c i e s and p r o c e d u r e s g o v e r n i n g t h e c o n d u c t o f s t u d e n t s i n c l i n i c a l s e t t i n g s w h i c h can be u s e d as c r i t e r i a f o r t h e e v a l u a t i o n s . Y e t , most do n o t a p p e a r t o h a v e e s t a b l i s h e d s t a n d a r d s f o r t h e a c t u a l p r o c e s s o f c o n d u c t i n g t h e e v a l u a t i o n s . D o c u m e n t a t i o n most f r e q u e n t l y u t i l i z e d a t most l e v e l s o f r e v i e w s were w r i t t e n s u b m i s s i o n s made by t h e g r i e v i n g s t u d e n t and h i s or h e r c l i n i c a l i n s t r u c t o r . A l e s s f r e q u e n t l y i d e n t i f i e d f o r m were t h e a n e c d o t a l n o t e s p r e p a r e d i n t h e c l i n i c a l s e t t i n g by c l i n i c a l i n s t r u c t o r s . Use o f s u c h n o t e s i s s u p p o r t e d by Adams who s t a t e s , " e v e r y i n s t r u c t o r m a i n t a i n s a n e c d o t a l r e c o r d s a b o u t t h e p e r f o r m a n c e o f e a c h s t u d e n t i n t h e c l i n i c a l a r e a e a c h day" (1979) . The lower f r e q u e n c y i n a s s e s s m e n t o f t h e s e n o t e s m i g h t be s p e c u l a t e d t o r e s u l t f r o m some e v a l u a t o r s e i t h e r n o t making n o t e s a t a l l or m aking n o t e s w h i c h w o u l d n o t be m e a n i n g f u l t o a t h i r d p a r t y . The u s e o f s t u d e n t s ' w r i t t e n a s s i g n m e n t s more f r e q u e n t l y t h e i r p r e v i o u s c l i n i c a l e v a l u a t i o n r e p o r t s i s a l s o an i n t e r e s t i n g f i n d i n g b e c a u s e programs n o t r e f e r r i n g t o s t u d e n t s ' p r e v i o u s c l i n i c a l p e r f o r m a n c e 228 were more l i k e l y t o m i s s " c o n s i s t e n c y o f p e r f o r m a n c e " (Bondy, 1983) w h i c h would p r o v i d e f u r t h e r s u p p o r t f o r c l i n i c a l i n s t r u c t o r s recommending p r o m o t i o n or f a i l u r e f o r s t u d e n t s . The above i s p a r t i c u l a r l y r e l e v a n t f o r b o r d e r l i n e s t u d e n t s . S u c h s t u d e n t s a r e f r e q u e n t l y m i s s e d when o n l y c u r r e n t p e r f o r m a n c e p r o b l e m s a r e c o n s i d e r e d and p r e v i o u s s i m i l a r d e f i c i t s a r e i g n o r e d . A s i m i l a r comment may be made f o r a s s e s s m e n t o f t h e s t u d e n t ' s e n t i r e f i l e . A s s e s s m e n t o f s t u d e n t s ' e n t i r e f i l e s was t h e l e a s t commonly s e l e c t e d c h o i c e . F a i l u r e t o r e v i e w b o t h t h e o r y g r a d e s and c l i n i c a l p e r f o r m a n c e o f s t u d e n t s m i g h t p r e c l u d e f a c u l t y f r o m d e c i d i n g whether s t u d e n t s ' i n a d e q u a t e p e r f o r m a n c e s were r e l a t e d t o poor k n o w l e d g e b a s e s or t o poor a p p l i c a t i o n o f t h e o r y t o t h e i r p a t i e n t c a r e d e l i v e r y . Though, i f h e a r i n g p a n e l s do u t i l i z e t h e s e f i l e s t h e y must e n s u r e t h a t t h e g r i e v i n g s t u d e n t s a l s o r e c e i v e c o p i e s o f a l l t h e d o c u m e n t a t i o n w i t h i n t h e i r f i l e s p r i o r t o u s e o f t h e s e f i l e s ' c o n t e n t i n a p p e a l p r o c e s s e s . F a i l u r e t o p r o v i d e s u c h c o p i e s c o u l d l e a d t o c h a r g e s by s t u d e n t s o f a b r e a c h o f n a t u r a l j u s t i c e . S u p p o r t f o r s u c h c h a r g e s stems f r o m Kane v. 229 B o a r d o f G o v e r n o r s o f U n i v e r s i t y o f B r i t i s h C o l u m b i a (1980) 110 D.L.R. ( 3 r d ) 311 ( S . C . C . ) . . . I t i s a c a r d i n a l p r i n c i p l e t h a t , u n l e s s e x p r e s s l y or by n e c e s s a r y i m p l i c a t i o n empowered t o a c t ex p a r t e , an a p p e l l a t e a u t h o r i t y must n o t h o l d p r i v a t e i n t e r v i e w s w i t h w i t n e s s e s o r , a f o r t i o r i , h e a r e v i d e n c e i n t h e a b s e n c e o f a p a r t y whose c o n d u c t i s impugned and under s c r u t i n y . E a c h p a r t y t o a h e a r i n g i s e n t i t l e d t o be i n f o r m e d o f , and t o make r e p r e s e n t a t i o n s w i t h r e s p e c t t o e v i d e n c e w h i c h a f f e c t e d t h e d i s p o s i t i o n o f t h e c a s e . S t u d e n t s u s u a l l y have t h e o p p o r t u n i t y t o i n i t i a t e r e v i e w s o f t h e i r c l i n i c a l e v a l u a t i o n d e c i s i o n s . However, t h e o v e r l a p p i n g o f p a n e l membership, t h e c h a n g e a b l e f o c u s o f r e v i e w s o f h e a r i n g s , and t h e o t h e r v a r y i n g p r o c e s s e s u t i l i z e d i n c o n d u c t i n g t h e s e r e v i e w s may be c o n s t r u e d by s t u d e n t s as u n f a i r and b i a s e d . F i n d i n g s c o n c e r n i n g t h e i n c i d e n c e o f r e v i e w s s u g g e s t t h a t g r i e v a n c e r e v i e w s ( w i t h i n t h e n u r s i n g program) u s u a l l y u p h o l d t h e c l i n i c a l e v a l u a t i v e d e c i s i o n s made by c l i n i c a l i n s t r u c t o r s . H o w b e i t , t h e i n c r e a s e d r a t e o f d e c i s i o n m o d i f i c a t i o n s a t a p p e a l 230 h e a r i n g s ( o u t s i d e the n u r s i n g program) appears t o q u e s t i o n the v a l i d i t y o f the g r i e v a n c e r e v i e w s . Data r e q u e s t e d d i d not p r o v i d e s u f f i c i e n t i n f o r m a t i o n t o d e t e r m i n e why such a l t e r a t i o n s i n d e c i s i o n s o c c u r r e d . Based on e a r l i e r d i s c u s s i o n s , however, t h r e e i s s u e s might cause such a l t e r a t i o n s : (a) membership on p a n e l s might be b i a s e d by i n v o l v i n g i n d i v i d u a l s who have been on p r e v i o u s l e v e l s of r e v i e w and who might i n f l u e n c e o t h e r members i n a r r i v i n g a t d e c i s i o n s , (b) i n i t i a l d e c i s i o n s might have been made by a s i n g l e p e r s o n , or (c) the l a c k o f s u f f i c i e n t d i r e c t i o n f o r c o n d u c t i n g h e a r i n g s might have l e d t o c r i t i c i s m o f p r e v i o u s r e v i e w s as h a v i n g been u n f a i r . I n s t i t u t i o n a l s t u d e n t a p p e a l s were few i n number; t h e r e f o r e , the f a c t t h a t a l a r g e p e r c e n t a g e l e d t o m o d i f i c a t i o n s o f p r e v i o u s r u l i n g s may not be s i g n i f i c a n t . Respondents r e p o r t t h a t these r e v i e w p a n e l s a t t h e i n s t i t u t i o n a l l e v e l d i d c o n s i d e r a l l t h r e e components of the c l i n i c a l e v a l u a t i v e d e c i s i o n s , i n c l u d i n g the academic. T h i s i s somewhat s u r p r i s i n g i n view o f the f a c t the some or most of the p a n e l members would not have the a p p r o p r i a t e academic e x p e r t i s e t o c o n s i d e r t h a t component. . The q u e s t i o n a r i s e s as to 231 whether t h e s e c i r c u m s t a n c e s might cause r e v i e w e r s t o a l t e r d e c i s i o n s based on a l a c k o f u n d e r s t a n d i n g o f the s i g n i f i c a n c e o f the o b s e r v a t i o n s t o p r o f e s s i o n a l p r a c t i c e . I m p l i c a t i o n s o f the F i n d i n g s I t can be s p e c u l a t e d t h a t f a i l u r e t o c l a r i f y w hich components o f c l i n i c a l e v a l u a t i o n judgments s h o u l d be r e v i e w e d a t each l e v e l o f h e a r i n g might l e a d t o i n c o n s i s t e n t and i n v a l i d r u l i n g s as s t u d e n t s seek r e d r e s s f o r the i n i t i a l d e c i s i o n s about t h e i r c l i n i c a l p e rformance. As c o n c l u d e d i n the p r e v i o u s s e c t i o n , t h e problems w i t h membership on p a n e l s might a l s o l e a d t o d e c r e a s e d E f f e c t i v e n e s s o f r e v i e w s . Members who s i t on more th a n one l e v e l o f r e v i e w cannot be c o n s i d e r e d i m p a r t i a l a f t e r p a r t i c i p a t i n g i n an e a r l i e r d e c i s i o n . F a i l u r e t o c l a r i f y i n w r i t i n g the p r o c e s s e s t o be adopted d u r i n g h e a r i n g s might a l s o l e a d t o i n c o n s i s t e n t methods o f r e v i e w from one l e v e l t o another i n any g i v e n i n s t i t u t i o n . Any o f the s e f a c t o r s c o u l d l e a d t o a d e c r e a s e i n t h e e f f e c t i v e n e s s o f r e v i e w s and hear i n g s . 232 On t h e b a s i s o f the above c o n c l u s i o n s , i n s t i t u t i o n s s h o u l d d e v e l o p a comprehensive f o r m a l i z e d system f o r the e v a l u a t i o n o f s t u d e n t s ' c l i n i c a l performance w h i c h d e l i n e a t e s a l l the i n s t i t u t i o n ' s l e v e l s o f r e v i e w . T h i s f o r m a l p r o c e s s would ensure t h a t the s t r u c t u r e , a t l e a s t , o f a l l r e v i e w p a n e l s i s u n b i a s e d a t a l l l e v e l s , t h a t the a s p e c t s o f the d e c i s i o n b e i n g r e v i e w e d are a p p r o p r i a t e f o r the e x p e r t i s e on p a n e l s , and t h a t the p r o c e s s t o be adopted a t each l e v e l would be c l e a r l y s p e c i f i e d i n p u b l i s h e d f o r m a l p r o c e d u r e s . I n a l l , i t i s recommended t h a t i n s t i t u t i o n s r e - e v a l u a t e t h e i r c u r r e n t g r i e v a n c e and a p p e a l mechanisms i n r e l a t i o n t o the f o l l o w i n g g u i d e l i n e s . These g u i d e l i n e s c o u l d be s e p a r a t e d i n t : o t h r e e s e c t i o n s r e l a t i n g t o : the s t r u c t u r e o f r e v i e w s , the r e v i e w p r o c e s s , and the outcome o f r e v i e w s . I . STRUCTURE ** There s h o u l d be w r i t t e n p o l i c i e s o u t l i n i n g the s t r u c t u r e o f a l l l e v e l s o f r e v i e w s p r o v i d e d w i t h i n the i n s t i t u t i o n s . These p o l i c i e s s h o u l d be a v a i l a b l e t o s t u d e n t s and s h o u l d i n c l u d e s t a t e m e n t s about the f o l l o w i n g : 1.1. T i m e - i n t e r v a l : the l e n g t h o f time s t u d e n t s have from t h e r e c e i p t o f t h e i r e v a l u a t i v e d e c i s i o n s t o the time when they must e x e r c i s e t h e i r o p t i o n t o i n i t i a t e r e v i e w s . 233 I . STRUCTURE ( c o n t i n u e d ) 1.2 R e a s o n f o r r e q u e s t : d a t a s t u d e n t s must p r o v i d e t o s u p p o r t t h e i r r e a s o n s f o r i n i t i a t i n g r e v i e w s . 1.3 C o n t a c t p e r s o n : d i r e c t i o n t o s t u d e n t s as t o - - 3.1. where r e q u e s t s f o r r e v i e w s s h o u l d be d i r e c t e d , 3.2 i f t h e i n s t i t u t i o n has an e s t a b l i s h e d p r i n t e d f o r m t o i n i t i a t e r e v i e w s , i t s name and where i t c a n be o b t a i n e d , 3.3 i f t h e r e i s a c h a r g e f o r r e v i e w s , t h e c o s t s f o r e a c h l e v e l o f r e v i e w . 1.4 A p p r o v a l o f r e q u e s t : how and when s t u d e n t s s h o u l d e x p e c t n o t i f i c a t i o n i f t h e i r r e q u e s t f o r r e v i e w s has b e e n a p p r o v e d , 1.5 I n t e r v i e w i n g : w h i c h p a r t i e s may be i n t e r v i e w e d a t e a c h l e v e l o f t h e r e v i e w p r o c e s s . I n d i v i d u a l s c i t e d by s t u d y r e s p o n d e n t s as b e i n g i n t e r v i e w e d , i n c l u d e : 5.1 g r i e v i n g s t u d e n t s . 5.2 g r i e v i n g s t u d e n t s ' p e e r s . 5.3 t h e i r c l i n i c a l i n s t r u c t o r s . 5.4 t h e c o o r d i n a t o r o f t h e i r p r o g r a m y e a r . 5.5 t h e head o f t h e n u r s i n g p rogram. 5.6 i n d i v i d u a l s who c o n d u c t e d p r e v i o u s l e v e l s o f r e v i e w s . 1.6 Documents: i d e n t i f i c a t i o n o f t h e v a r i o u s documents s t u d e n t s a r e r e q u i r e d t o s u b m i t f o r e a c h l e v e l o f r e v i e w , i n c l u d i n g t h e number o f c o p i e s t o be p r o v i d e d and who i s r e s p o n s i b l e f o r t h e c o s t . Documents f r e q u e n t l y c i t e d by s t u d y r e s p o n d e n t s i n c l u d e : 6.1 s t u d e n t s ' c l i n i c a l e v a l u a t i o n r e p o r t s , 6.2 a n e c d o t a l n o t e s p r e p a r e d by c l i n i c a l i n s t r u c t o r s a b o u t s t u d e n t s ' p e r f o r m a n c e , 6.3 s t u d e n t s ' w r i t t e n a s s i g n m e n t s f o r c o u r s e s , 6.4 s t u d e n t s ' p r e v i o u s e v a l u a t i o n s , 6.5 s t u d e n t s ' e n t i r e f i l e s , 6.6 w r i t t e n s u b m i s s i o n by s t u d e n t s , 6.7 w r i t t e n s u b m i s s i o n by s t u d e n t s ' a d v i s o r s . 234 I . STRUCTURE ( c o n t i n u e d ) 1.7 A d v i s o r s : w hether or n o t s t u d e n t s and/or c l i n i c a l i n s t r u c t o r s may be a c c o m p a n i e d by a d v i s o r s . I f t h e y c a n : 7.1 who t h e s e a d v i s o r s may or may n o t be, ( e . g . , l a w y e r s ) , 7.2 what r o l e t h e s e a d v i s o r s may p e r f o r m : 7.2.1 as a c t i v e p a r t i c i p a n t s , 7.2.2 as p a s s i v e p a r t i c i p a n t s , or 7.2.3 as a c t i v e o n l y i f r e q u e s t e d t o by t h e r e v i e w c h a i r p e r s o n . 1.8 Outcome o f r e v i e w s : i n s t r u c t i o n s as t o -- 8.1 how t h e outcome o f r e v i e w s w i l l be r e p o r t e d t o t h e s t u d e n t s , 8.2 when t h e outcome w i l l be r e p o r t e d t o t h e s t u d e n t s , 8.3 who w i l l r e p o r t t h e outcome t o t h e s t u d e n t s , 8.4 w h e t h e r or n o t t h e outcome w i l l be p l a c e d on t h e s t u d e n t s ' f i l e s and, i f s o , i n what form. 1.9 Membership o f R eview P a n e l s : s p e c i f i c a t i o n as t o t h e c o m p o s i t i o n o f r e v i e w p a n e l s . I I . PROCESS T h e r e s h o u l d be w r i t t e n g u i d e l i n e s o u t l i n i n g how e a c h l e v e l o f r e v i e w s h o u l d be i m p l e m e n t e d , i n c l u d i n g s t a t e m e n t s r e g a r d i n g : I I . 1 S e l e c t i o n o f Members: o u t l i n i n g - - 1.1 t h e c o m p o s i t i o n o f r e v i e w p a n e l s , 1.2 who s e l e c t s members, 1.3 who c h a i r s r e v i e w p a n e l s , 1.4 c r i t e r i a f o r s e l e c t i o n o f members: 1.4.1 t h e y must be o b j e c t i v e , 1.4.2 t h e y must n o t have been p a r t o f t h e i n i t i a l d e c i s i o n c o n c e r n i n g t h e g r i e v i n g s t u d e n t s ' c o m p l a i n t , 1.4.3 t h e y must n o t have s e r v e d on any p r e v i o u s r e v i e w p a n e l s where t h e g r i e v i n g s t u d e n t s ' c o m p l a i n t had b een h e a r d . 235 I I . PROCESS ( c o n t i n u e d ) I I . 2 P r e - r e v i e w P r e p a r a t i o n : an o r i e n t a t i o n f o r p a n e l members r e g a r d i n g * 2.1 t h e d e c i s i o n s w h i c h need t o be made c o n c e r n i n g d o c u m e n t a t i o n t o be r e v i e w e d , i n t e r v i e w s t o be c o n d u c t e d , and t h e r o l e o f a d v i s o r s ( i f a d v i s o r s a r e a l l o w e d ) , 2.2 t h e f o c u s o f t h e r e v i e w s i n r e l a t i o n t o : 2.2.1 t h e v a l i d i t y o f o b s e r v a t i o n s made by t h e c l i n i c a l i n s t r u c t o r s , 2.2.2 t h e p r o c e d u r e s u s e d t o a r r i v e a t t h e d e c i s i o n s , 2.2.3 t h e f a i r n e s s and r e a s o n a b l e n e s s o f t h e d e c i s i o n s , 2.3 The e s t a b l i s h e d c r i t e r i a t o j u d g e e a c h f o c u s o f t h e r e v i e w s , 2.4 The d e c i s i o n m a k i n g power o f t h e r e v i e w p a n e l , 2.4.1 t o make a f i n a l d e c i s i o n , 2.4.2 t o change s t u d e n t s ' c l i n i c a l marks, 2.4.3 t o make re c o m m e n d a t i o n s r e g a r d i n g t h e f i n d i n g s , 2.4:.4 t o make a summary o f t h e f i n d i n g s . 2.5 The d o c u m e n t a t i o n o f r e v i e w s , 2.5.1 t o make a w r i t t e n summary o f t h e p r o c e e d i n g s , 2.5.2 t o make a w r i t t e n t r a n s c r i p t o f t h e p r o c e e d i n g s , 2.5.3 t o make a t a p e r e c o r d i n g o f t h e p r o c e e d i n g s , 2.5.4 t o p r e p a r e m i n u t e s o f t h e h e a r i n g . I I . 3 The R e v i e w P r o c e s s : s p e c i f y i n g t h e s e q u e n c e t o be c a r r i e d o u t d u r i n g r e v i e w s , i n c l u d i n g : 3.1 t h e r o l e o f t h e c h a i r p e r s o n , 3.2 t h e r o l e o f r e v i e w p a n e l members, 3.3 t h e i n s t r u c t i o n s f o r i n t e r v i e w i n g g r i e v i n g s t u d e n t s , t h e i r c l i n i c a l i n s t r u c t o r s , and w i t n e s s e s , 3.4 t h e u s e o f s u b m i t t e d documents d u r i n g t h e r e v i e w . 236 I I I . OUTCOME H- There should be w r i t t e n g u i d e l i n e s o u t l i n i n g the f o r m u l a t i o n , documentation, and r e p o r t i n g of the outcomes of reviews i n c l u d i n g : 111.1 F o r m u l a t i o n of the outcomes: s p e c i f y i n g -H 1.1 what power reviewers have i n r e l a t i o n to the decision-making p r o c e s s . 1.2 the t i m e * l i m i t from when the review i s completed to when a r e p o r t or d e c i s i o n must be reached. 111.2 Documentation of the outcomes: d e s c r i b i n g how the outcome i s to be documented. 111.3 R e p o r t i n g o f the outcomes: d e s c r i b i n g the f o l l o w i n g : 3 .1 to whom 3 .2 i n what 3 .3 to whom the proceedings i s to be submitted. F a c u l t y need to become aware of the need to fo l l o w i n s t i t u t i o n a l l y p r e s c r i b e d p o l i c i e s and procedures r e l a t e d to student e v a l u a t i o n . F a i l u r e to do so w i l l l i k e l y r e s u l t i n a m o d i f i c a t i o n of e v a l u a t i v e d e c i s i o n s . In other words, no matter how w e l l p r e s c r i b e d e v a l u a t i o n p o l i c i e s and procedures may be, i f they are not fol l o w e d r e v e r s a l s of such d e c i s i o n s w i l l occur because the a d m i n i s t r a t i v e component of the judgment could not be demonstrated. The study's p r o t o t y p i c models pr o v i d e d a s t r u c t u r e to assess what are the i n s t i t u t i o n a l p r a c t i c e s for 237 a s s e s s i n g e v a l u a t i v e d e c i s i o n s c o n c e r n i n g s t u d e n t s ' c l i n i c a l p erformance. These models s e r v e d as t h e o r e t i c a l v iews o f how e v a l u a t i v e judgments and r e v i e w s s h o u l d be conducted w i t h i n and w i t h o u t n u r s i n g e d u c a t i o n programs and were based on the l i t e r a t u r e r e v i e w e d . Programs d e v i a t i n g from t h e s e t h e o r e t i c a l models need t o determine i f these d e v i a t i o n s are l i k e l y t o have any p o s i t i v e or n e g a t i v e impacts on the outcome o f r e v i e w s . And i f so, whether changes t o the s t r u c t u r e s , or p r o c e s s e s need t o be u n d e r t a k e n . The Judgment Model i s l i k e l y t o p r o v i d e a new t h e o r e t i c a l view o f the components t o e v a l u a t i o n d e c i s i o n s i n n u r s i n g e d u c a t i o n . I t t r a n s c e n d s t h r o u g h t h r e e s e p a r a t e d i s c i p l i n e s , t h o s e o f : e d u c a t i o n a d m i n i s t r a t i o n , n u r s i n g e d u c a t i o n , and e d u c a t i o n law. As such, i t p r o v i d e s a more c o o r d i n a t e d view of the components o f judgments from those d i s c i p l i n e s who p o t e n t i a l l y have the power t o impact n u r s i n g e d u c a t i o n d e c i s i o n - m a k i n g p r o c e s s e s . 238 L i m i t a t i o n o f t h e S t u d y T h i s s t u d y was u n d e r t a k e n t o e x p l o r e t h e a d m i n i s t r a t i v e s t r u c t u r e s and p r o c e d u r e s u t i l i z e d by C a n a d i a n n u r s i n g programs t o d e a l w i t h t h e c l i n i c a l f a i l u r e o f t h e i r s t u d e n t s . T h u s , i t i s an e x p l o r a t o r s t u d y and i t s f i n d i n g s c a n n o t be g e n e r a l i z e d b eyond t h e p rograms p r o v i d i n g d a t a f o r t h e s t u d y . N o n e t h e l e s s , t h e number r e p o r t i n g was 86.2% o f t h e p o p u l a t i o n d e f i n e d . The method o f s u r v e y r e s e a r c h was c h o s e n o v e r su o t h e r methods as i n t e r v i e w and o b s e r v a t i o n due t o l i m i t a t i o n s i n t i m e and r e s e a r c h c o s t s . A more f r u i t f u l c o l l e c t i o n o f d a t a w o u l d p e r h a p s h a ve been p o s s i b l e i f t h e r e s e a r c h e r had b e en a b l e t o v i s i t eac p r o g r a m and c o n d u c t i n t e r v i e w s w i t h t h e r e s p e c t i v e p r o g r a m h e a d s . T h i s w o u l d , no d o u b t , have r e d u c e d a m b i g u i t i e s o f t e r m i n o l o g y , i n s t r u c t i o n s , and i n t e n t q u e s t i o n s . However, t h e s u r v e y method d i d p r o v i d e a c o n s i s t e n t p a t t e r n o f d a t a t o be a n a l y z e d . The l i m i t a t i o n o f t h e s t u d y t o d i p l o m a and b a c c a l a u r e a t e n u r s i n g programs l e a d i n g t o n u r s e r e g i s t r a t i o n d i d n o t p e r m i t d a t a f r o m a l l n u r s i n g 239 p r ograms i n Canada. A l s o t h e e x c l u s i o n o f Quebec programs p r e v e n t s any e x t r a p o l a t i o n o f f i n d i n g s t o Quebec p r o g r a m s . The u s e o f a p o p u l a t i o n o f p rograms v e r s u s a sample was f e l t t o be i m p o r t a n t t o i n c r e a s e v a l i d i t y o f f i n d i n g s . However, t h e r e s p o n s e r a t e o f 86.2%, t h o u g h h i g h compared t o much q x i e s t i o n n a i r e r e s e a r c h , i s s h o r t o f t h e t o t a l p o p u l a t i o n t h u s r e q u i r i n g c a u t i o n i n g e n e r a l i z i n g f i n d i n g s . F u r t h e r R e s e a r c h The s t u d y r e p r e s e n t s t h e i n i t i a l o p e n i n g o f t h i s s u b j e c t a r e a t o r e s e a r c h i n Canada and p r o v i d e s f u r t h e r c l a r i t y t o t h e p r e v i o u s r e s e a r c h i n t h e a r e a by G o l d e n ( 1 9 8 1 ) . S u b s e q u e n t s t u d i e s a r e needed t o e n s u r e t h a t t h e p r o t o t y p i c models a r e c o m p a t i b l e w i t h t h e a d m i n i s t r a t i v e s t r u c t u r e s and p r o c e d u r e s i n p l a c e i n n u r s i n g e d u c a t i o n p r o g r a m s . T h i s s t u d y a l s o needs t o be e x t e n d e d t o t h e Quebec n u r s i n g programs t o g a i n an u n d e r s t a n d i n g o f w hether d i f f e r e n c e s do o c c u r b a s e d on l e g a l s y s t e m d i f f e r e n c e s or whether s u c h programs a r e s i m i l a r t o t h e o t h e r s s u r v e y e d . 240 The Judgment Model r e q u i r e s f u r t h e r r e s e a r c h t o de t e r m i n e t h e v a l i d i t y o f the t h r e e components i n the judgment p r o c e s s . T h i s study was not d e s i g n e d t o de t e r m i n e t h e model's e f f e c t i v e n e s s but o n l y t o dete r m i n e whether the components were e v i d e n t d u r i n g e v a l u a t i o n d e c i s i o n r e v i e w s and h e a r i n g s . S p e c i f i c a l l y , r e s e a r c h i s needed t o dete r m i n e : (a) what w e i g h t f a c u l t y members p l a c e on t h e s e components d u r i n g t h e i r d e c i s i o n - m a k i n g p r o c e s s r e g a r d i n g s t u d e n t s ' c l i n i c a l p e r f o r m a n c e , and (b) why f a c u l t y members' d e c i s i o n s a r e o v e r t u r n e d a t d i f f e r e n t l e v e l s o f r e v i e w s / h e a r i n g . F u r t h e r r e s e a r c h a l s o needs t o be u n d e r t a k e n t o dete r m i n e b o t h the impact o f the s i x f a c t o r s w h i c h i n f l u e n c e i n s t r u c t o r s ' d e c i s i o n - m a k i n g r e g a r d i n g s t u d e n t s ' p e r f o r m a n c e , and t h e impact o f u s i n g f a c u l t y e v a l u a t i o n s t a n d a r d s t o s u p p o r t o b j e c t i v e c l i n i c a l a p p r a i s a l s o f s t u d e n t s . These s t u d i e s ' f i n d i n g s s h o u l d f a c i l i t a t e t h e development o f f o r m a l assessment p r o c e d u r e s f o r s t u d e n t s ' c l i n i c a l p r a c t i c e i n dipl o m a and b a c c a l a u r e a t e n u r s i n g programs. 241 BIBLIOGRAPHY Adams, Eda, G l o r i a Corbo, L o u i s e D e B l o i s , Dandra DeYoung, and G l o r i a J u s t . 1979. L e g a l c o n s i d e r a t i o n s i n e v a l u a t i n g the c l i n i c a l performance o f s t u d e n t s . I n C o n s i d e r a t i o n s i n C l i n i c a l E v a l u a t i o n s : I n s t r u c t o r s , S t u d e n t s , L e g a l I s s u e s , Data. P u b l i c a t i o n No. 16-1764. New York: N a t i o n a l League f o r N u r s i n g . A d d e r l y , B e a t r i c e V., and Anna M. Brock. 1977. E v a l u a t i n g c l i n i c a l performance i n n u r s i n g . J o u r n a l o f Advanced N u r s i n g 2 ( 7 ) : 355*63. A l e x a n d e r , K e r n . 1980. S c h o o l Law. S t . P a u l , Minn.: West P u b l i s h i n g Co. A l e x a n d e r , K e r n . 1978. A d m i n i s t r a t i v e p r e r o g a t i v e : R e s t r a i n t s o f n a t u r a l j u s t i c e on s t u d e n t d i s c i p l i n e . J o u r n a l o f Law and E d u c a t i o n 7 ( 3 ) : 331-358. A l l i s o n , Derek, Mark Holmes, and B r i a n S h a r p i e s . 1983. The e v a l u a t i o n o f t e a c h e r s : D e v e l o p i n g p r o f e s s i o n a l s or e l i m i n a t i n g i ncompetents? The Y e l l o w P apers 2 ( 2 ) . E d u c a t i o n a l A d m i n i s t r a t i o n , OISE. Angus, Monica D. 1980. A n a l y s i s o f s t u d e n t performance r a t i n g s . N u r s i n g P apers 1 2 ( 2 ) : 5-16. B a r n e s , C a r o l . 1978. The s p e c t e r o f academic m a l p r a c t i c e . Change 1 0 ( 5 ) : 10*11. B a r r i t t , E v e l y n R., and Lou Anne I r i o n . 1970. Advantages and d i s a d v a n t a g e s o f n o n g r a d i n g . N u r s i n g O u t l o o k 18 ( 4 ) : 40*41. Beam, S h e i l a , and Edward R. H i n e s . 1981. P r o v i s i o n s and consumer e x p e c t a t i o n s . J o u r n a l o f C o l l e g e Student P e r s o n n e l 2 2 ( 1 ) : 36*41. B e r d i e , Douglas R., and John F. Anderson. 1974. Q u e s t i o n n a i r e s : D e s i g n and Use. Metuchen, New J e r s e y : The Scarecrow P r e s s I n c . Bergen, John J . 1982. Should s c h o o l s p r o v i d e a p p e a l p r o cedures f o r d i s c i p l i n e d s t u d e n t s ? C h a l l e n g e i n E d u c a t i o n a l A d m i n i s t r a t i o n 21 (2) : 17-25. B e v i l , . W . , and L.C. G r o s s . 1981. A s s e s s i n g the adeqiaacy o f c l i n i c a l l e a r n i n g s e t t i n g s . N u r s i n g O u t l o o k 29 ( 1 1 ) : 658-661. Besag, Frank P., and P e t e r L. Besag. 1985. S t a t i s t i c s f o r the H e l p i n g P r o f e s s i o n s . B e v e r l y H i l l s : Sage P u b l i c a t i o n s . 242 Black, H.C. 1979. Black's Law D i c t i o n a r y . 5th E d i t i o n . S t . P a u l , M i n n i s o t a : West P u b l i s h i n g Co. Bomford, P h y l , and Win Lewis. 1980. Schools and the Law 1980. Learn, 11 (2): 1*3. Bondy, Kath l e e e n Nowak. 1983. C r i t e r i o n - r e f e r e n c e d d e f i n i t i o n s f o r r a t i n g s c a l e s i n c l i n i c a l e v a l u a t i o n . J o u r n a l of Nur s i n g E d u c a t i o n 22(9): 376-382. Borg, Walter R., and Walter D. G a l l . 1983. E d u c a t i o n a l Research: An I n t r o d u c t i o n , 4 t h e d i t i o n . New York: Longman. Brock, A l l a n D. 1979. Board of c u r a t o r s of the U n i v e r s i t y of M i s s o u r i v. Horowitz: student due process r i g h t s and j u d i c i a l degerence to academic d i s m i s s a l s . W i l l a m e t t e Law Review 15 (3): 577-590. Brooks, James H. L e g a l Issues and Postsecondary Students. Monograph 84-9. I n s t i t u t e for Higher E d u c a t i o n Law and Governance. Houston: U n i v e r s i t y of Houston. Brozenec, S a l l y , J u l i e R. M a r s h a l l , Charlene Thomas, and Marian Walsh. 1987. E v a l u a t i n g b o r d e r l i n e students. J o u r n a l of Nur s i n g E d u c a t i o n 1(26): 42-44. B r u n e i , E.S. 1978. Determining how to begin. In E v a l u a t i n g C l i n i c a l Competence i n the H e a l t h P r o f e s s i o n s , M. K. Morgan, S t . L o u i s : C.V. Mosby Co. Calogero, Stefano. 1979. C o n s t i t u t i o n a l Law - '- p r o c e d u r a l due process -- u n i v e r s i t y hearings r e g a r d i n g academic d i s m i s s a l -* * Board of Curators of the U n i v e r s i t y of M i s s o u r i v. Horowitz. New York Law School Law Review 25(1): 133-149. C a n f i e l d , J u d i t h S. 1983. A l l i e d h e a l t h student and f a c u l t y a t t i t u d e s r e g a r d i n g f a c u l t y e v a l u a t i o n . J o u r n a l of A l l i e d H e a l t h 12(1) : 43-47. Carmack, B e t t y J . 1983. R e s o l v i n g an i n c i d e n t o f academic di s h o n e s t y : P l a g a r i s m . Nurse Educator 8 ( 1 ) : 9-12. Ca r p e n i t o , Lynda J u a l l . 1983. The f a i l i n g or \insat i s f a c t o r y student. Nurse Educator 8 ( 4 ) : 32-33. C o l l i n g s w o r t h , Terrence P. 1982. Ap p l y i n g n e g l i g e n c e d o c t r i n e to the t e a c h i n g p r o f e s s i o n . J o u r n a l of Law and Educati o n 11(4): 479* 505. Cr e i g h t o n , Helen. 1975. Law Every Nurse Should Know. 3rd E d i t i o n . Toronto: W.B. Saunders. 243 Curry, Margaret Ann. 1981. C l i n i c a l evaluation of the nursing in s t r u c t o r . Nursing Forum 22 (1): 63-71. Connors, Eugene T. 1981. Educational Tort L i a b i l i t y and Malpractice. Bloomington, Indiana: Phi Delta Kappa. Darragh, R i t a , Grace Jacobson, Beth Sloan, and G l o r i a Standquist. 1986. Unsafe student practice: Policy and procedures. Nursing Outlook 4 (34): 176*8. Davidhizar, Ruth E., and Angela McBride. 1985. How nursing students explain their success and f a i l u r e i n c l i n i c a l experiences. Journal of Nursing Education 7 (24): 284-90. Del Bueno, D.J. 1983. Doing the right thing: Nurses' a b i l i t y to make c l i n i c a l decisions. Nurse Educator 8(4): 7-11. DeMitchell, Todd A. 1980. J u d i c i a l non-intervention i n scholastic matters. College Student Journal 14(Summer): 146*148. deTornyay, Reba. 1985. Second opinions: When needed? Journal of Nursing Education 8(24): 313. El^Khawas, Elaine. 1979. To assure f a i r practice toward students. Education Record 60(Summer): 282-294. El k i n s , Carol M. 1983. Accreditation: D i s p e l l i n g the myths. Journal of A l l i e d Health 12(4): 249-261. Elson, John. 1978. A common law remedy for the educational harms caused by incompetent or careless teaching. Northwestern University Law Review 73 (4): 641-771. Evans, J.M., H.N. Janisch, David J . Mullan, and R.C.B. Risk. 1984. Administrative Law: Cases, Text, and Materials, 2nd Ed i t i o n . Toronto: Emond Montgomery Publications Limited. F i e l d i n g , Nigel 0., and Jane L. F i e l d i n g . 1986. Linking Data. Vol. 4, Qualitative Research Methods. Beverly H i l l s : Sage Publications. Flygate, Thomas J . 1982. Another state rejects "educational malpractice" lawsuit. Phi Delta Kappan 63(9): 631*632. Folger, Joseph, and Janelle Shubert. 1981. Who cares about student complaints? Educational Record 6 2 ( F a l l ) : 31-33. Fowler, Floyd J . 1984. Survey Research Methods. Vol. 1, Applied So c i a l Research Methods Series. Beverly H i l l s : Sage Publications. 244 F r i s b i e , D.A. 1979. E v a l u a t i n g Student Achievement: P r i n c i p l e s , Trends and Problems, p u b l i c a t i o n no. 23-1766, New York: N a t i o n a l League for N u r s i n g . Fowler, G e r r a r d , and Barbara Heater. 1983. G u i d e l i n e s for c l i n i c a l e v a l u a t i o n . J o u r n a l of Nursing E d u c a t i o n 22(9): 402*404. Garber, M i l t o n B. 1980. Damages a c t i o n s for d e n i a l of equal e d u c a t i o n a l o p p o r t u n i t i e s . M i s s o u r i Law Review 45(2): 281*306. Green, Joan L. 1974. A c c r e d i t a t i o n i n n u r s i n g education: New trends and r e s p o n s i b i l i t i e s . J o u r n a l of A l l i e d H e a l t h 13(1): 4. Golden, Edward J . 1981. P r o c e d u r a l Due Process for Academic and D i s c i p l i n a r y D i s m i s s a l s at Tax-Supported Postsecondary I n s t i t u t i o n s : A f t e r Goss and Horowitz. Ph.D. d i s s . , U n i v e r s i t y of V i r g i n i a . Golden, Edward J . 1982. P r o c e d u r a l due process for students at p u b l i c c o l l e g e s and u n i v e r s i t i e s . J o u r n a l of Law and E d u c a t i o n 11(7): 331-359. Golden, Edward J . 1981-2. C o l l e g e student d i s m i s s a l s and the E l d r i d g e f a c t o r s : What process i s due? J o u r n a l of C o l l e g e and U n i v e r s i t y Law 8 ( 4 ) : 495-509. Golembiecki, B o n i t a L., and Nancie E t h i n g t o n . 1979. L e g a l i m p l i c a t i o n s of c l i n i c a l e v a l u a t i o n . In C o n s i d e r a t i o n s i n C l i n i c a l E v a l u a t i o n : I n s t r u c t o r s , Students, L e g a l Issues, Data. P u b l i c a t i o n No. 16-1764. New York: N a t i o n a l League for N u r s i n g . Gordon, M.J. 1978. Assessment of student a f f e c t : A c l i n i c a l approach. E d i t e d by M.K. Morgan, E v a l u a t i n g C l i n i c a l Competence i n the H e a l t h P r o f e s s i o n s . St. L o u i s : C.V. Mosby Co. G r i f f i t h , Janet W., and Audrey J . Bakanauskas. 1983. Student* i n s t r u c t o r r e l a t i o n s h i p i n n u r s i n g education. J o u r n a l of Nursing E d u c a t i o n 22(3): 104-107. Gunne, G.Manny. 1980. C o l l e g e autonomy and the c o u r t s . USA Today 109 (September): 54*57. G u r a l n i k , David B., ed. 1982. Webster's New World D i c t i o n a r y , 2nd C o l l e g e E d i t i o n . New York: Simon and Schuster. 245 Hazard, W i l l i a m R. 1978. E d u c a t i o n and the Law, Cases and M a t e r i a l s on P u b l i c School, 2nd e d i t i o n . New York: The Free P r e s s . H i l t o n , Ann. 1980. R e l a t i o n s h i p s between classroom theory and c l i n i c a l p r a c t i c e . N u r s i n g Papers 12(3): 20-23. Horvath, Frances L. 1983. R i g h t s and r e s p o n s i b i l i t i e s i n the a c c r e d i t a t i o n p r o c e s s . J o u r n a l of A l l i e d H e a l t h 12 (4) : 245-248. Huston, C a r o l J . 1986. P r e p a r i n g for student g r i e v a n c e s . Nursing Outlook 6 (34 ) : 304. I n f a n t e , Mary Sue. 1986. The c o n f l i c t i n g r o l e s of nurse and nurse educator. N u r s i n g Outlook 2 (34) : 94-96. I o v a c c h i n i , E r i c V. 1981. The impact of recent academic due process d e c i s i o n s on c o u n s e l l o r education programs. C o u n s e l l o r E d u c a t i o n and S u p e r v i s i o n , 20 (3) : 163-171. I r b y , David M., Jane I . F a n t e l , Steven D. Milam, and M. Roy Schwarz. 1981. L e g a l g u i d e l i n e s for e v a l u a t i n g and d i s m i s s i n g medical students. New England J o u r n a l of Medicine 304(3) : 180-184. I r b y , David M. 198-1. F a c u l t y r i g h t s and r e s p o n s i b i l i t i e s i n e v a l u a t i n g and d i s m i s s i n g medical students. J o u r n a l of C o l l e g e and U n i v e r s i t y Law 8 ( 1 ) : 102-119. I r b y , David M. 1978. Trends i n c l i n i c a l e v a l u a t i o n . In E v a l u a t i n g C l i n i c a l Competence i n the H e a l t h P r o f e s s i o n s . M.K. Morgan, ed. S t . L o u i s : C.V. Mosby Co. J e n k i n s , H.M. 1985. Improving c l i n i c a l d e c i s i o n making i n n u r s i n g . J o u r n a l of Nursing E d u c a t i o n 6 (24) : 242-243. Jennings, E i l e e n K. 1980. Breach of c o n t r a c t s u i t s by students a g a i n s t postsecondary e d u c a t i o n i n s t i t u t i o n s : Can they succeed? Ph. D. d i s s . , U n i v e r s i t y of Nebraska. Jennings, E i l e e n K. 1980-1. Breach of c o n t r a c t s u i t s by students a g a i n s t post secondary e d u c a t i o n a l i n s t i t u t i o n s : Can they succeed? J o u r n a l of C o l l e g e and U n i v e r s i t y Law 1980*1 (3*4): 191*221. Johnson, Dale M., and Mary J . W i l h i t e . 1973. R e l i a b i l i t y and v a l i d i t y of s u b j e c t i v e e v a l u a t i o n of b a c c a l a u r e a t e program n u r s i n g s t u d e n t s . N u r s i n g Research 22 (3) : 257-262. 246 J o r g e n s e n , C y n t h i a A. 1979. Donohue v. Copiague U n i o n F r e e S c h o o l D i s t r i c t : New Yo r k chooses not t o r e c o g n i z e " e d u c a t i o n a l m a l p r a c t i c e . " A l b a n y Law Review 4 3 ( 2 ) : 339-359. J u d i s , J o s e p h . 1982. C a u t i o n s on the use o f s t u d e n t e v a l u a t i o n s o f t e a c h i n g . J o u r n a l o f A l l i e d H e a l t h 1 1 ( 1 ) : 43-48. Jung, S t e v e n , and Susan L. McBain. 1980. P r o t e c t i n g s t u d e n t s from e d u c a t i o n a l m a l p r a c t i c e : Focus on NCA. N o r t h C e n t r a l A s s o c i a t i o n Q u a r t e r l y 5 4 ( W i n t e r ) : 344-348. Kapp, M a r s h a l l B. 1981. L e g a l i s s u e s i n f a c u l t y e v a l u a t i o n o f s t u d e n t c l i n i c a l p erformance. J o u r n a l o f M e d i c a l E d u c a t i o n 5 6 ( 7 ) : 559-564. K a r u h i j e , H a r r i e t t F. 1986. E d u c a t i o n a l p r e p a r a t i o n f o r c l i n i c a l t e a c h i n g : P e r c e p t i o n s o f the nurse e d u c a t o r . J o u r n a l o f N u r s i n g E d u c a t i o n 4 ( 2 5 ) : 137-144. K e l l y , L u c i e Young. 1977. C r e d e n t i a l i n g o f h e a l t h c a r e p e r s o n n e l . N u r s i n g O u t l o o k 2 5 ( 9 ) : 562-569. K e l l y , S i s t e r M a r g a r e t John. 1981. H o s p i t a l - c o l l e g e e d u c a t i o n c o n t r a c t s ensure mutual p r o t e c t i o n . H o s p i t a l s 55 (January 1 6 ) : 95T96+. K i r k , Jerome, and Marc L. M i l l e r . 1986. R e l i a b i l i t y and V a l i d i t y i n Q u a l i t a t i v e R e s e a r c h . V o l . 1, Q u a l i t a t i v e R e s e a r c h Methods. B e v e r l y H i l l s : Sage P u b l i c a t i o n s . K l e i n , A l i c e J . 1979. E d u c a t i o n a l m a l p r a c t i c e : Can t h e j u d i c i a r y remedy the growing problem o f f u n c t i o n a l i l l i t e r a c y ? S u f f o l k U n i v e r s i t y Law Review 1 3 ( 1 ) : 27-62. K o w a l s k i , C.J. 1977. Some l e g a l a s p e c t s o f h i g h e r e d u c a t i o n . C o l l e g e S t u d e n t J o u r n a l 1 1 ( F a l l ) : 277-284. K r i v y , Gary J o s e p h P a u l . 1982. The l e g a l r i g h t s and r e s p o n s i b i l i t i e s o f u n i v e r s i t y s t u d e n t s i n Canada. Ph D. d i s s . , U n i v e r s i t y o f A r i z o n a . L a M o r t e , M i c h a e l W., and R o b e r t B. Meadows. 1979. E d u c a t i o n a l l y sound due p r o c e s s i n academic a f f a i r s . J o u r n a l o f Law and E d u c a t i o n 8 ( 4 ) : 197-214. Lampkin, N o v e t a , Thomas m. Cannon, J r . , and S. L o u i s F a i r c h i l d . 1985. C r i s i s i n t e r v e n t i o n : When the c l i e n t i s a n u r s i n g s t u d e n t . J o u r n a l o f N u r s i n g E d u c a t i o n 4 ( 2 4 ) : 148-150. L e f t w i c h , R o b e r t E. 1983. The nurse as g r i e v a n c e o f f i c e r . J o u r n a l o f N u r s i n g E d u c a t i o n 2 2 ( 7 ) : 301-3. 247 L e n n i n g e r , M a d e l e i n e M. ed. 1985. Q u a l i t a t i v e R e s e a r c h Methods i n N u r s i n g . O r l a n d o : G l r u n e & S t r a t t o n , I n c . L e j a , A l f r e d E . , and Don S i k k i n k . 1976. D e v e l o p i n g a g r a d i n g a p p e a l s p o l i c y . I m p r o v i n g C o l l e g e U n i v e r s i t y T e a c h i n g 2 4 ( S p r i n g ) : 91*92. L e r b l a n c e , Penn. 1979. L e g a l and e d u c a t i o n a l a s p e c t s o f s t u d e n t d i s m i s s a l s : A v i e w from t h e Law S c h o o l . S o u t h w e s t e r n Law J o u r n a l 3 3 ( 2 ) : 605*633. L o g s d o n , J a n n B., P a t r i c i a K. L a c e f i e l d , and Mary J o C l a r k . 1979. The d e v e l o p m e n t o f an a c a d e m i c g r i e v a n c e p r o c e d u r e . N u r s i n g O u t l o o k 2 7 ( 3 ) : 184-190. MacKay, A. Wayne. 1984. E d u c a t i o n Law I n Canada. T o r o n t o : Emond-Montgomery P u b l i c a t i o n s L i m i t e d . M a g s i n o , Romulo F. 1980. S t u d e n t r i g h t s i n N e w f o u n d l a n d and t h e U.S.: A c o m p a r a t i v e s t u d y . MORN Watch 7 ( 3 - 4 ) : 11-19. M a g s i n o , Romulo F. 1978. S t u d e n t r i g h t s i n Canada: Nonsense upon s t i l t s ? I n t e r c h a n g e 1 1 2 ( 5 2 ) : 77*78. M a j o r o w i c z , K a r e n . 1986. C l i n i c a l g r a d e s and t h e g r i e v a n c e p r o c e s s . N u r s e E d u c a t o r 2 ( 1 1 ) : 36-40. Mancuso, J o h n H e n r y . 1976. L e g a l r i g h t s t o r e a s o n a b l e r u l e s , f a i r g r a d e s , and q u a l i t y c o u r s e s . I n P r o m o t i n g Consumer P r o t e c t i o n f o r S t u d e n t s . J . S t a r k , ed. San F r a n c i s c o : J o s s e y - B a s s I n c . Mancuso, J o h n H e n r y . 1978. C o n s u m e r i s m on campus: An a n a l y s i s o f t h e s t u d e n t ' s l e g a l r i g h t s t o a c c u r a t e g r a d e s , f a i r a c a d e m i c t r e a t m e n t , and q u a l i t y e d u c a t i o n a l s e r v i c e s . Ph. D., d i s s . , S y r a c u s e U n i v e r s i t y . M a r i e n f e l d , R. D e n n i s , and J o h n C. R e i d . 1980. S u b j e c t i v e v s . o b j e c t i v e e v a l u a t i o n o f c l i n i c a l c l e r k s . New E n g l a n d J o u r n a l o f M e d i c i n e 3 0 2 ( 1 8 ) : 1036-1037. Marx, C h a r l e s A. 1983. A s t u d y o f t h e l i t i g a t i o n c o n c e r n i n g a c a d e m i c d i s m i s s a l and t h e i m p l i c a t i o n s f o r s c h o l a s t i c r e q u i r e m e n t s p o l i c i e s a t s e l e c t e d i n s t i t u t i o n s o f h i g h e r e d u c a t i o n i n M i s s i s s i p p i . Ph. D. d i s s . , T he U n i v e r s i t y o f M i s s i s s i p p i . Mason, G r e g , B r i a n M c p h e r s o n , D e r e k Hum, and L a n c e R o b e r t s . 1983. S u r v e y R e s e a r c h Methods, 2nd e d i t i o n . I n s t i t u t e f o r S o c i a l and E c o n o m i c R e s e a r c h , F a c u l t y o f A r t s . The U n i v e r s i t y o f M a n i t o b a . 248 Mass, M i c h a e l A. 1980. Due p r o c e s s r i g h t s o f s t u d e n t s : l i m i t a t i o n s on Goss v. L o p e z - - a r e t r e a t o u t o f t h e " t h i c k e t . " J o u r n a l o f Law and E d u c a t i o n 9 ( 4 ) : 449-462. M a t t i n g l y , S t e p h e n L . , and D o n a l d D. G e h r i n g . 1980. The d e n t a l e d u c a t o r and t h e law. J o u r n a l o f D e n t a l E d u c a t i o n 4 4 ( 8 ) : 478*483. M a z z a r e l l a , J o A n n . 1982. S e l f * d e f e n s e f o r p r i n c i p a l s : On s t a y i n g o u t o f c o u r t . P r i n c i p a l 6 2 ( 2 ) : 22*26. M c C a r t h y , M.M. 1985. L e g a l c h a l l e n g e s t o a c a d e m i c d e c i s i o n s i n h i g h e r e d u c a t i o n . C o l l e g e and U n i v e r s i t y 6 0 ( 2 ) : 99-112. McFadden, E l l e n A. 1986. C l i n i c a l d e c i s i o n making and i t s r e l a t i o n s h i p t o l e a r n i n g s t y l e and p e r s o n a l i t y t y p e . Ph. D. d i s s . , U n i v e r s i t y o f M a r y l a n d . McGhehey, M.A. ed. 1980. S c h o o l Law i n C o n t e m p o r a r y S o c i e t y . K a n s a s : N a t i o n a l O r g a n i z a t i o n on L e g a l P r o b l e m s o f E d u c a t i o n . M i l i a m , S.D. and R.D. M a r s h a l l . 1987. Impact o f r e g e n t s o f the U n i v e r s i t y o f M i c h i g a n v. E w i n g on a c a d e m i c d i s m i s s a l s from g r a d u a t e and p r o f e s s i o n a l s c h o o l s . J o u r n a l o f C o l l e g e and U n i v e r s i t y Law 1 3 ( 4 ) : 335*352. M i l l e r , S i s t e r P a t r i c i a . 1982. S t u d e n t g r a d e a p p e a l s - * p r o c e d u r e and p r o c e s s . J o u r n a l o f N u r s i n g E d u c a t i o n 2 1 ( 6 ) : 34*38. M i l l e r , S i s t e r P a t r i c i a . 1981. F a c i l i t a t i n g s t u d e n t g r a d e a p p e a l h e a r i n g s . N u r s i n g O u t l o o k 2 9 ( 3 ) : 186-188. Moore, R o b e r t N., D a v i d A. N a s h , and J o h n 0. Andes. 1980. A c a d e m i c and d i s c i p l i n a r y d i s m i s s a l i n d e n t a l e d u c a t i o n : The l e g a l b a s i s . J o u r n a l o f D e n t a l E d u c a t i o n 4 4 ( 1 2 ) : 705-711. Murphy, J u a n i t a F., and R o s e m a r i e S a n d l i n g . 1978. E d u c a t i o n a l a d m i n i s t r a t i o n : Due p r o c e s s f o r s t u d e n t g r i e v a n c e s . J o u r n a l o f N u r s i n g A d m i n i s t r a t i o n 8 ( 1 1 ) : 39-43. N a d e l s o n , C a r o l . 1983. E m e r g i n g i s s u e s f o r c o l l e g e s t u d e n t s i n t h e 1980s'. J o u r n a l o f A m e r i c a n C o l l e g e H e a l t h 31 ( F e b . ) : 177-84. Na s h , D a v i d A., R o b e r t N. Moore, and J o h n 0. A n d e s . 1981. A c a d e m i c d i s m i s s a l f o r c l i n i c a l r e a s o n s : I m p l i c a t i o n s o f t h e H o r o w i t z c a s e . J o u r n a l o f D e n t a l E d u c a t i o n 4 5 ( 3 ) : 150-155. 249 N a t i o n a l L e a g u e f o r N u r s i n g . 1977 . A c c o u n t a b i l i t y : The O b l i g a t i o n o f t h e E d u c a t i o n a l I n s t i t u t i o n t o t h e Consumer. P u b l i c a t i o n No. 23*1690, New Y o r k : N a t i o n a l L e a g u e f o r N u r s i n g . New E n g l a n d J o u r n a l o f M e d i c i n e . 1980. S u b j e c t i v e v s . o b j e c t i v e e v a l u a t i o n o f c l i n i c a l c l e r k s . New E n g l a n d J o u r n a l o f M e d i c i n e 3 0 3 ( 1 5 ) : 890-891. N i e d r i n g h a u s L i n d a , and D o r o t h y L . O ' D r i s c o l l . 1983. S t a y i n g w i t h i n t h e law - * a c a d e m i c p r o b a t i o n and d i s m i s s a l . N u r s i n g O u t l o o k 3 1 ( 3 ) : 156*159. N o r d i n , V i r g i n i a D a v i s . 1981*2. The c o n t r a c t t o e d u c a t e : Towards a more w o r k a b l e t h e o r y o f t h e s t u d e n t * u n i v e r s i t y r e l a t i o n s h i p . J o u r n a l o f C o l l e g e and U n i v e r s i t y Law 8 ( 2 ) : 141*181. O r l i c h , D o n a l d C. 1978. D e s i g n i n g S e n s i b l e S u r v e y s . New Y o r k : R e d g r a v e P u b l i s h i n g Company. Owens, H i l d a F. 1980. T h e y ' l l t a k e y o u t o c o u r t i f y o u d o n ' t w a t c h o u t . Community and J u n i o r C o l l e g e J o u r n a l 5 1 ( 0 c t o b e r ) : 12-16. Ozimek, D o r o t h y , and H e l e n Y u r a . 1977. S t u d e n t s Have R e s p o n s i b i l i t i e s as W e l l as R i g h t s . P u b l i c a t i o n No. 15*1666. New Y o r k : N a t i o n a l L e a g u e f o r N u r s i n g . P a b i a n , J a y M. 1979*80. E d u c a t i o n a l m a l p r a c t i c e and m i n i m a l competency t e s t i n g : I s t h e r e a l e g a l remedy a t l a s t ? New E n g l a n d Law R e v i e w 1 5 ( 1 ) : 101-127. P a t t e r s o n , A r l e n e H. 1980. P r o f e s s i o n a l m a l p r a c t i c e : S m a l l c l o u d b u t g r o w i n g b i g g e r . P h i D e l t a Kappan 6 2 ( 3 ) : 193*196. P a v e l a , G a r y . 1978. J u d i c i a l r e v i e w o f a c a d e m i c d e c i s i o n m a k i n g a f t e r H o r o w i t z . N0PLE S c h o o l Law J o u r n a l 8 ( 1 ) : 55*75. P o l i t , D e n i s e , and B e r n a d e t t e H u n g l e r . 1983. N u r s i n g R e s e a r c h : P r i n c i p l e s and Methods, 2nd e d i t i o n . P h i l a d e l p h i a : J.B. L i p p i n c o t t Company. P o l l o k , C l e m e n t i n e S., Gaye W. P o t e e t , and Wayne L . Whelan. 1983. D i m i n i s h i n g f a c u l t y l i a b i l i t y . N u r s e E d u c a t o r 8 ( 1 ) : 31*34. P o l l o k , C l e m e n t i n e S., Gaye W. P o t e e t , and Wayne L . Whelan. 1977. F a c u l t y have r i g h t ' s t o o . A m e r i c a n J o u r n a l o f N u r s i n g 7 7 ( 4 ) : 636-638. P o l l o k , C l e m e n t i n e S., Gaye W. P o t e e t , and Wayne L . Whelan. 1976. S t u d e n t r i g h t s . A m e r i c a n J o u r n a l o f N u r s i n g 76 ( 4 ) : 600*603. 250 P o t e e t , Gaye W., and C l e m e n t i n e S. P o l l o k . 1981. The l e g a l s i d e : When a s t u d e n t f a i l s c l i n i c a l . American J o u r n a l o f N u r s i n g 8 1 ( 1 0 ) : 1889*1890. P y l e r , C h r i s P a r n e l l . 1978. The g r i e v a n c e a p p e a l s p r o c e s s i n the S t a t e U n i v e r s i t y o f F l o r i d a : A case s t u d y . Ph. D. d i s s . , The F l o r i d a S t a t e U n i v e r s i t y . Ray, L a u r a Krugman. 1981. Toward c o n t r a c t u a l r i g h t s f o r c o l l e g e s t u d e n t s . J o u r n a l o f Law and E d u c a t i o n 1 0 ( 2 ) : 163-189. Regan, W i l l i a m Andrew. 1983. Student n u r s e s : A c c i d e n t s and n u r s i n g s c h o o l l i a b i l i t y . Regan R e p o r t on N u r s i n g Law 2 4 ( 7 ) . Regan, W i l l i a m Andrew. 1983. N u r s i n g e d u c a t i o n and s t u d e n t s ' r i g h t s : L e g a l i t i e s . Regan R e p o r t on N u r s i n g Law 2 4 ( 3 ) . Regan, W i l l i a m Andrew. 1983. Nurse e d u c a t o r s : S u p e r v i s i o n and l i a b i l i t y . Regan R e p o r t on N u r s i n g Law 1 9 ( 2 ) . Repp, Susan e l a i n e C l a r k s . 1980. F a c t o r s w h i c h d i f f e r e n t i a t e between s u c c e s s f u l and d i s m i s s e d s t u d e n t s on academic p r o b a t i o n a t C e n t r a l M i c h i g a n U n i v e r s i t y . Ph. D. d i s s . , M i c h i g a n S t a t e U n i v e r s i t y . R i c h a r d s o n , R i c h a r d C. J r . , and Edward Johnson. 1980. N a r r o w i n g the l i m i t s o f a d m i n i s t r a t i v e d i s c r e t i o n . Peabody J o u r n a l o f E d u c a t i o n ( O c t o b e r ) : 2 2 - 26 R o b e r t s , R.N. 1986. P u b l i c u n i v e r s i t y responses t o academic d i s h o n e s t y : D i s c i p l i n a r y or academic. J o u r n a l o f Law and E d u c a t i o n 1 5 ( 4 ) : 369*384. R o b i n s o n , K a r e n , and Sharon Br i d g e w a t e r 1 9 7 9 . Named i n a g r i e v a n c e : I t happened t o us. N u r s i n g O u t l o o k 2 7 ( 3 ) : 191*194. Rozovsky, L o m e E. 1973. The h o s p i t a l ' s r e s p o n s i b i l i t y f o r s t u d e n t s i n t r a i n i n g . C a nadian H o s p i t a l 5 0 ( 1 7 ) : 1 7 - 8 . S a d l e r , D.R. 1983. E v a l u a t i o n and the improvement o f academic l e a r n i n g . J o u r n a l o f H i g h e r E d u c a t i o n , 5 4 ( 1 ) : 60*79. S a y l o r , C o l e e n Rae. 1987. O r g a n i z a t i o n a l e v a l u a t i o n and p r o f e s s i o n a l e d u c a t i o n : C l i n i c a l e v a l u a t i o n o f n u r s i n g s t u d e n t s . Ph. D. d i s s . , S t a n f o r d U n i v e r s i t y . S c h u r r , George M. 1982. Toward a code o f e t h i c s f o r academics. J o u r n a l o f Hi g h e r E d u c a t i o n 5 3 ( 3 ) : 318-334. S c o t t , N.W. 1977 . L e g a l i m p l i c a t i o n s o f a d m i n i s t r a t i v e d e c i s i o n s . Saskatchewan A d m i n i s t r a t o r 9 ( 4 ) : 11*21. 251 S e p l e r , Harvey J . 1981. A c o m p a r a t i v e a n a l y s i s o f m a l p r a c t i c e l i t i g a t i o n . P h i D e l t a Kappan 6 3 ( 3 ) : 1 9 1 . S h a f f e r , R o b e r t a . 1984. " L e g a l R esources f o r H i g h e r E d u c a t i o n Law: A Review E s s a y " . Monograph 84-3. I n s t i t u t e f o r H i g h e r E d u c a t i o n Law and Governance. Houston: U n i v e r s i t y o f Houston. Sherman, M o r r i s , and P e r r y Z i r k e l . 1980. Student d i s c r i m i n a t i o n i n h i g h e r e d u c a t i o n : A r e v i e w o f the law. J o u r n a l of Law and E d u c a t i o n 9 ( 8 ) : 3 0 1 0 4 1 . S h u b e r t , J a n e l l e , and Jo s e p h F o l g e r . 1980. H a n d l i n g s t u d e n t g r i e v a n c e s i n h i g h e r e d u c a t i o n . I n R e s o l v i n g C o n f l i c t i n H i g h e r E d u c a t i o n . New D i r e c t i o n s f o r H i g h e r E d u c a t i o n No. 32: 43*48. San F r a n c i s c o : J o s s e y - B a s s I n c . Snyder, John R., and J a n a C. W i l s o n . 1983. F a c u l t y development f o r c l i n i c a l i n s t r u c t o r s i n A l l i e d H e a l t h : An i n s e r v i c e approach. J o u r n a l o f A l l i e d H e a l t h 12 ( 1 ) : 31-40. Sorenson, G a i l P a u l u s . " T e a c h i n g H i g h e r E d u c a t i o n Law: A Review E s s a y . " Monograph 84*2. I n s t i t u t e f o r H i g h e r E d u c a t i o n Law and Governance. Houston: U n i v e r s i t y o f Houston. S p i n k , L i n d a Muh. 1983. Due p r o c e s s i n academic d i s m i s s a l . J o u r n a l o f N u r s i n g E d u c a t i o n 2 2 ( 7 ) : 305-306. S p i r o , George W. 1978. L e g a l p r o c e s s i n e d u c a t i o n a l i n s t i t u t i o n s : A p r o p o s a l f o r s t r e n g t h e n i n g i n t r a - u n i v e r s i t y l e g a l systems. N0PLE S c h o o l Law J o u r n a l 8 ( 1 ) : 40-54. S t a h l , A d e l l e G. 1974. S t a t e Boards o f N u r s i n g : L e g a l a s p e c t s . N u r s i n g C l i n i c s o f N o r t h America 9 ( 3 ) : 505-512. S t a i n t o n , M. C o l l e e n . 1983. A format f o r r e c o r d i n g the c l i n i c a l p erformance o f n u r s i n g s t u d e n t s . J o u r n a l o f N u r s i n g E d u c a t i o n 2 2 ( 3 ) : 114*6. S t a r k , Joan S,. 1976. P r o m o t i n g Consumer P r o t e c t i o n f o r S t u d e n t s . New D i r e c t i o n s f o r H i g h e r E d u c a t i o n . San F r a n c i s c o : J o s s e y * B a s s I n c . S t r a d e r , M a r l e n e K. 1985. M a l p r a c t i c e and nurse e d u c a t o r s : D e f i n i n g l e g a l r e s p o n s i b i l i t i e s . J o u r n a l o f N u r s i n g E d u c a t i o n 9 ( 2 4 ) : 363*367. Thor ne, G a y l o r d L. 1983. M e a s u r i n g s t u d e n t l e a r n i n g . Nurse E d u c a t o r 8 ( 3 ) : 7-10. T u r a b i a n , K a t e L. 1987, A Manual For W r i t e r s o f Term P a p e r s , Theses, and D i s s e r t a t i o n s , 5 t h e d i t i o n . C h i c a g o : The U n i v e r s i t y o f Chica g o P r e s s . 252 V e r n o n , E n i d L . 1979. Due p r o c e s s f l e x i b i l i t y i n a c a d e m i c d i s m i s s a l s : H o r o w i t z and b e y o n d . J o u r n a l o f Law and E d u c a t i o n 8 ( 1 ) : 45^54. Wood, V i v i a n . 1971. The b o r d e r l i n e s t u d e n t n u r s e . N u r s i n g P a p e r s 3 ( 2 ) : 15-26. W o o d s i d e , Donna J e a n . 1981. C o n c e r n and kn o w l e d g e o f b a c c a l a u r e a t e n u r s e e d u c a t o r s f o r t h e l e g a l a s p e c t s o f s t u d e n t e v a l u a t i o n and f a i l u r e . E d . D. d i s s . , U n i v e r s i t y o f C i n c i n n a t i . W o o l l e y , Alma S. 1977. The l o n g and t o r t u r e d h i s t o r y o f c l i n i c a l e v a l u a t i o n . N u r s i n g O u t l o o k 2 5 ( 5 ) : 308-315. Y o g i s , J.A. 1983. C a n a d i a n Law D i c t i o n a r y . New Y o r k : B a r r o n ' s E d u c a t i o n a l S e r i e s , I n c . Young, D.P. e d . 1981. Y e a r b o o k o f H i g h e r E d u c a t i o n Law. N a t i o n a l O r g a n i z a t i o n on L e g a l P r o b l e m s o f E d u c a t i o n . T o p e k a , K a n s a s . LEGAL CASES B r o o k i n s v . B o n n e l l ( 1 9 7 3 ) , 362 F. Supp. 379. Donohue v. C o p i a g u e U n i o n F r e e S c h o o l D i s t r i c t , (1978)