Open Collections

UBC Theses and Dissertations

UBC Theses Logo

UBC Theses and Dissertations

Learner responses to television in distance education : the need for a qualitative approach to research Bullen, Mark 1989

You don't seem to have a PDF reader installed, try download the pdf

Item Metadata

Download

Media
UBC_1989_A8 B84.pdf [ 4.99MB ]
Metadata
JSON: 1.0054479.json
JSON-LD: 1.0054479+ld.json
RDF/XML (Pretty): 1.0054479.xml
RDF/JSON: 1.0054479+rdf.json
Turtle: 1.0054479+rdf-turtle.txt
N-Triples: 1.0054479+rdf-ntriples.txt
Original Record: 1.0054479 +original-record.json
Full Text
1.0054479.txt
Citation
1.0054479.ris

Full Text

LEARNER RESPONSES TO TELEVISION IN DISTANCE EDUCATION: THE NEED FOR A QUALITATIVE APPROACH TO RESEARCH by MARK BULLEN B.Ed., The U n i v e r s i t y o f B r i t i s h C o l u m b i a , 1982. A THESIS SUBMITTED IN PARTIAL FULFILLMENT OF THE REQUIREMENTS FOR THE DEGREE OF MASTER OF ARTS i n THE FACULTY OF GRADUATE STUDIES (DEPARTMENT OF EDUCATIONAL PSYCHOLOGY AND SPECIAL EDUCATION) We a c c e p t t h i s t h e s i s as c o n f o r m i n g t o t h e r e q u i r e d s t a n d a r d THE UNIVERSITY OF BRI T I S H COLUMBIA M a r c h 1989 © Mark B u l l e n , 1989. In presenting this thesis in partial fulfilment of the requirements for an advanced degree at the University of British Columbia, I agree that the Library shall make it freely available for reference and study. I further agree that permission for extensive copying of this thesis for scholarly purposes may be granted by the head of my department or by his or her representatives. It is understood that copying or publication of this thesis for financial gain shall not be allowed without my written permission. Department of Educational Psychology and Special Education The University of British Columbia Vancouver, Canada Date M a r r h 1 fi r 1 QSQ DE-6 (2/88) i i A b s t r a c t D e s p i t e t h e w o r l d w i d e g r o w t h o f d i s t a n c e e d u c a t i o n and o v e r 30 y e a r s o f m e d i a r e s e a r c h , we know v e r y l i t t l e a b o u t t h e r o l e a n d e f f e c t s o f t e l e v i s i o n a n d o t h e r m e d i a i n d e l i v e r i n g d i s t a n c e e d u c a t i o n . Q u e s t i o n s s u c h a s : "What m e d i a s h o u l d be u s e d t o d e l i v e r i n s t r u c t i o n ? " o r "Does t e l e v i s i o n o r any medium o r f o r m a t w i t h i n a medium have an a d v a n t a g e o v e r any o t h e r i n t e r m s o f s t u d e n t a c h i e v e m e n t a nd s a t i s f a c t i o n ? " have n o t been p r o p e r l y a d d r e s s e d b y r e s e a r c h . T h i s s t u d y e x a m i n e s a p p r o a c h e s t h a t c h a r a c t e r i z e p a s t and p r e s e n t r e s e a r c h a n d o f f e r s a model f o r f u r t h e r r e s e a r c h t o a d d r e s s u n a n s w e r e d q u e s t i o n s a b o u t t h e r o l e o f t e l e v i s i o n i n d i s t a n c e e d u c a t i o n . The s t u d y a r g u e s t h a t t h e r e a r e two ma i n r e a s o n s why r e s e a r c h h a s f a i l e d t o a d e q u a t e l y answer q u e s t i o n s a b o u t t h e u s e o f t e l e v i s i o n i n d i s t a n c e e d u c a t i o n : t h e do m i n a n c e o f e x p e r i m e n t a l o r q u a s i - e x p e r i m e n t a l r e s e a r c h m ethods, a n d t h e a s s u m p t i o n o f a q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e . T h e r e i s a l i m i t e d amount o f e x p e r i m e n t a l r e s e a r c h a n d what t h e r e i s h a s m e t h o d o l o g i c a l f l a w s . Most r e s e a r c h i n d i s t a n c e e d u c a t i o n i s c l a s s i f i e d a s q u a s i - e x p e r i m e n t a l , b u t much o f t h i s i s a l s o m e t h o d o l o g i c a l l y weak and i s c r i t i c i z e d f o r t r a d i n g o f f i n t e r n a l v a l i d i t y f o r e c o l o g i c a l v a l i d i t y . The i i i h y p o t h e t i c o - d e d u c t i v e p a r a d i g m i n w h i c h most o f t h e r e s e a r c h h a s b een c o n d u c t e d assumes a q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e w h i c h v i e w s l e a r n i n g a s e s s e n t i a l l y a r e p r o d u c t i v e p r o c e s s . As a r e s u l t , r e s e a r c h e r s have e x a m i n e d and compared a c h i e v e m e n t and a t t i t u d e s i n n a r r o w q u a n t i t a t i v e t e r m s . T h i s has b een d i f f i c u l t t o a c c o m p l i s h i n p r o p e r l y c o n t r o l l e d e x p e r i m e n t s , so we a r e l e f t w i t h r e s u l t s t h a t n o t o n l y a r e i n c o n c l u s i v e a b o u t t h e q u a n t i t y o f l e a r n i n g , b u t a l s o r e v e a l l i t t l e a b o u t t h e q u a l i t y o f l e a r n i n g . T h i s s t u d y p r o p o s e s an a p p r o a c h t h a t i s b a s e d on a q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e and t h a t u s e s b o t h q u a n t i t a t i v e and q u a l i t a t i v e r e s e a r c h m e t h o d o l o g i e s . The q u a l i t a t i v e a p p r o a c h a t t e m p t s t o e xamine phenomena f r o m t h e p e r s p e c t i v e o f t h e s u b j e c t as i t o c c u r s i n t h e n a t u r a l s e t t i n g . The q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e v i e w s l e a r n i n g as a p r o c e s s i n w h i c h t h e l e a r n e r a c t i v e l y i n t e r p r e t s , a d a p t s and a p p l i e s t h e k n o w l e d g e o r i n f o r m a t i o n he o r she a c q u i r e s . T h e r e i s l e s s e m p h a s i s on "how much i s l e a r n e d " a n d more on "what i s l e a r n e d " . The s t u d y c o n c l u d e s w i t h a p r o p o s a l t h a t i l l u s t r a t e s how q u a l i t a t i v e a n d q u a n t i t a t i v e m e t h o d o l o g i e s c a n be c o m b i n e d t o e x a m i n e t h e p r o c e s s e s and outcomes o f l e a r n i n g a n d s t u d e n t a t t i t u d e s i n a m u l t i - m e d i a d i s t a n c e e d u c a t i o n c o u r s e . From t h i s e x p l o r a t o r y s t u d y i s s u e s d i s t a n c e e d u c a t i o n w o u l d emerge p r o v i d i n g d i r e c t i o n f o f u r t h e r r e s e a r c h . V T a b l e o f C o n t e n t s A b s t r a c t i i A c k n o w l e d g e m e n t s i x C h a p t e r I - I n t r o d u c t i o n 1 The P r o b l e m 1 P u r p o s e 4 D e f i n i t i o n s 5 D i s t a n c e E d u c a t i o n 5 V i d e o t a p e d and A u d i o t a p e d L e c t u r e s 7 R e s e a r c h P a r a d i g m s 7 The H y p o t h e t i c o - d e d u c t i v e p a r a d i g m 8 The Q u a l i t a t i v e p a r a d i g m 9 M e t h o d o l o g i e s 10 The E x p e r i m e n t a l method 10 The Q u a s i - e x p e r i m e n t a l method 10 Q u a l i t a t i v e r e s e a r c h methods 11 C o n c e p t i o n s o f Knowledge 13 The Q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e 13 The Q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e 14 S o u r c e s o f R e s e a r c h L i t e r a t u r e 15 O r g a n i z a t i o n o f t h e R e v i e w 16 C h a p t e r I I - R e v i e w o f R e l a t e d T h e o r y a n d R e s e a r c h 18 T h e o r y 18 v i I n t r o d u c t i o n 18 I n t e r a c t i o n o f M e d i a , C o g n i t i o n a n d L e a r n i n g 18 C r i t i c i s m o f Salomon's t h e o r y 23 M e n t a l S k i l l s and t h e M e d i a 24 C r i t i c i s m o f O l s o n a n d B r u n e r 27 The C o n c r e t e n e s s o f T e l e v i s i o n 28 M o t i o n , S i m u l t a n e i t y , D i m e n s i o n a l i t y 29 B a t e s ' C h a r a c t e r i s t i c s o f T e l e v i s i o n 29 D i s t r i b u t i o n and s o c i a l c h a r a c t e r i s t i c s 29 C o n t r o l c h a r a c t e r i s t i c s 30 S y m b o l i c c h a r a c t e r i s t i c s 31 Summary & C o n c l u s i o n s 33 R e s e a r c h 35 R e s e a r c h P r o b l e m s 35 I n t r o d u c t i o n 35 I n h e r e n t p r o b l e m s 35 M e t h o d o l o g i c a l p r o b l e m s 37 Summary 43 E x p e r i m e n t a l R e s e a r c h 44 I n t r o d u c t i o n 44 L i v e v s . v i d e o i n a t r a d i t i o n a l s e t t i n g 47 I n s t r u c t o r c o n t a c t 50 v i i T e l e v i s i o n / v i d e o f o r m a t v a r i a b l e s 51 Summary 55 Q u a s i E x p e r i m e n t a l R e s e a r c h 5 6 I n t r o d u c t i o n 57 T e l e c o u r s e - f a c e t o f a c e c o m p a r i s o n 57 T e l e v i s i o n on-campus and a t a d i s t a n c e 69 C l a s s r o o m i n s t r u c t i o n u s i n g t e l e v i s i o n 74 L e a r n e r r e s p o n s e s t o t h e t e l e v i s i o n component 75 The R e l a t i v e i m p o r t a n c e o f d i s t a n c e e d u c a t i o n c o u r s e components 78 Summary and C o n c l u s i o n s 78 Summary 78 C o n c l u s i o n s 80 C h a p t e r I I I - A P r o p o s a l f o r a Q u a l i t a t i v e S t u d y .85 R a t i o n a l e 85 P u r p o s e 87 D e s i g n 90 . S e t t i n g a n d C o n t e x t 98 D a t a C o l l e c t i o n 99 D a t a A n a l y s i s 105 R e l i a b i l i t y and V a l i d i t y I l l C r e d i b i l i t y 112 v i i i T r a n s f e r a b i l i t y 113 D e p e n d a b i l i t y 113 Conf i r m a b i l i t y 114 T i m e t a b l e 114 Summary 115 R e f e r e n c e s 117 i x A c k n o w l e d g e m e n t s I w i s h t o e x t e n d s i n c e r e t h a n k s t o my t h e s i s s u p e r v i s o r , Ron N e u f e l d , and my c o m m i t t e e members, L e R o i D a n i e l s and H a r o l d R a t z l a f f f o r t h e i r a d v i c e and s u g g e s t i o n s and above a l l t h e i r p a t i e n t c o n s i d e r a t i o n o f my i d e a s . I w o u l d a l s o l i k e t o a c k n o w l e d g e t h e s u p p o r t and e n c o u r a g e m e n t I r e c e i v e d f r o m my w i f e R o c h e l l e . W i t h o u t h e r I w o u l d n o t have been a b l e t o c o m p l e t e t h i s t h e s i s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 1 C h a p t e r I - I n t r o d u c t i o n The P r o b l e m D i s t a n c e e d u c a t i o n h a s become a w i d e s p r e a d and a c c e p t e d method o f t e a c h i n g a n d l e a r n i n g . I n b o t h d e v e l o p e d a n d d e v e l o p i n g c o u n t r i e s i t i s p r o v i d i n g a c c e s s t o h i g h e r e d u c a t i o n f o r a r a p i d l y g r o w i n g number o f s t u d e n t s (Holmberg, 1981; N e i l , 1981; D a n i e l e t a l . , 1 9 8 2 ) . I n Canada, t h e g r o w t h o f d i s t a n c e e d u c a t i o n began i n t h e e a r l y 1970's and has o c c u r r e d a t two l e v e l s . On one l e v e l more and more c o n v e n t i o n a l u n i v e r s i t i e s and c o l l e g e s have c r e a t e d o r e x p a n d e d e x i s t i n g e x t e n s i o n d e p a r t m e n t s , w h i l e , on a n o t h e r l e v e l , t h r e e d i s t a n c e e d u c a t i o n i n s t i t u t i o n s h ave b e e n e s t a b l i s h e d : A t h a b a s c a U n i v e r s i t y i n A l b e r t a , The Open U n i v e r s i t y i n B r i t i s h C o l u m b i a , a n d T e l e - U n i v e r s i t e i n Quebec ( B u r g e , W i l s o n & M e h l e r , 1 9 8 4 ) . I n t h e U n i t e d S t a t e s , P e t e r s o n ' s C a t a l o g f o r I n d e p e n d e n t S t u d y l i s t s 72 u n i v e r s i t i e s o f f e r i n g o v e r 12,000 d i s t a n c e e d u c a t i o n c o u r s e s ( H u n t e r , 1 9 8 3 ) ; and L e w i s (1983) has l i s t e d 50 more i n s t i t u t i o n s s u c h as c o l l e g e s and p r o f e s s i o n a l a s s o c i a t i o n s t h a t a l s o o f f e r c o u r s e s by d i s t a n c e e d u c a t i o n . D e s p i t e t h e w o r l d w i d e g r o w t h o f d i s t a n c e e d u c a t i o n , we a r e s t i l l a t an e x p l o r a t o r y s t a g e i n t e r m s o f d i s t a n c e e d u c a t i o n r e s e a r c h . T h e r e i s e v i d e n c e t h a t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 2 l e a r n i n g a t a d i s t a n c e i s as e f f e c t i v e o r more e f f e c t i v e , i n t e r m s o f s t u d e n t a c h i e v e m e n t , t h a n l e a r n i n g i n t h e c l a s s r o o m a n d r e s e a r c h i n d i c a t e s t h a t l e a r n i n g w i l l o c c u r no m a t t e r what medium we u s e t o d e l i v e r t h e i n s t r u c t i o n t o s t u d e n t s a t a d i s t a n c e , w h e t h e r i t i s p r i n t , t e l e v i s i o n , a u d i o o r v i d e o t a p e (Schramm, 1977b; S m i t h , 1 9 8 3 ) . B u t on a p r a c t i c a l l e v e l d i s t a n c e e d u c a t i o n r e s e a r c h has n o t been v e r y h e l p f u l . " M e d i a r e s e a r c h i n p o s t - s c h o o l e d u c a t i o n has n o t p r o v i d e d d e c i s i o n - m a k e r s w i t h p r a c t i c a l , v a l i d , d e p e n d a b l e g u i d e l i n e s f o r m a k i n g c h o i c e s on t h e b a s i s o f i n s t r u c t i o n a l e f f e c t i v e n e s s " (Campeau, 1974, p. 6 2 ) . To make m a t t e r s w o r s e , t h e q u a l i t y o f c o m p a r a t i v e r e s e a r c h i n d i s t a n c e e d u c a t i o n has been s e r i o u s l y q u e s t i o n e d ( B a t e s , 1981b; P r o s s e r , 1984; Chacon-Duque, 1985; S h a v e l s o n , Webb, & H o t t a , 1 9 8 7 ) . As a r e s u l t o f t h e s h o r t c o m i n g s o f r e s e a r c h , much o f t h e i n s t r u c t i o n a l d e s i g n i n d i s t a n c e e d u c a t i o n i s b a s e d on t h e i n t u i t i o n o f t h e c o u r s e d e s i g n e r s and a u t h o r s , r e s o u r c e l i m i t a t i o n s d i c t a t e d by a d m i n i s t r a t o r s and t h e p o l i t i c a l c o n s i d e r a t i o n s o f t h e p o l i c y m a k e r s . I n e f f e c t , many o f t h e i n s t r u c t i o n a l d e s i g n d e c i s i o n s a r e a r b i t r a r y a n d n o t b a s e d on any so u n d t h e o r y o r r e s e a r c h (Campeau, 1 9 7 4 ) . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 3 I n G r e a t B r i t a i n , Canada and t h e U n i t e d S t a t e s , f o r e x a m p l e , t e l e v i s i o n i s u s e d h e a v i l y i n d i s t a n c e e d u c a t i o n . T h i s i s n o t b e c a u s e i t has p r o v e n t o be more e f f e c t i v e t h a n any o t h e r medium; t h e r e s e a r c h has b e e n e q u i v o c a l on t h i s p o i n t (Schramm, 1 9 7 7 b ) . The r e a s o n , a c c o r d i n g t o G a l l a g h e r ( 1 9 7 8 ) , i s p o l i t i c a l . T e l e v i s i o n i s v i s i b l e and t h u s was u s e d as a way o f r a i s i n g t h e v i s i b i l i t y o f d i s t a n c e e d u c a t i o n i n s t i t u t i o n s i n t h e i r e a r l y d a y s when p o l i t i c a l a n d p u b l i c s u p p o r t was s e e n as n e c e s s a r y . B u t d i s t a n c e e d u c a t i o n has m a t u r e d a n d s h o u l d no l o n g e r be s e r i o u s l y q u e s t i o n e d as a way o f d e l i v e r i n g i n s t r u c t i o n . What i s i m p o r t a n t now i s t o l o o k c r i t i c a l l y a t t h e d e s i g n o f d i s t a n c e e d u c a t i o n c o u r s e s and how s t u d e n t s u se t h e c o u r s e m a t e r i a l s . The use o f n o n - p r i n t m e d i a i n d i s t a n c e e d u c a t i o n c a n be e x t r e m e l y e x p e n s i v e , y e t we know v e r y l i t t l e a b o u t t h e e f f e c t i v e n e s s , i n t e r m s o f s t u d e n t l e a r n i n g a n d s t u d e n t a t t i t u d e s , o f d i f f e r e n t m e d i a . What m e d i a s h o u l d be u s e d t o d e l i v e r i n s t r u c t i o n ? Does any medium o r f o r m a t w i t h i n a medium have an a d v a n t a g e o v e r any o t h e r i n t e r m s o f s t u d e n t a c h i e v e m e n t and s a t i s f a c t i o n ? R e s e a r c h , t h u s f a r , has n o t been a b l e t o a n s w e r t h e s e q u e s t i o n s y e t t h e y n e e d t o be a n s w e r e d w i t h some d e g r e e o f c e r t a i n t y so t h a t i n s t r u c t i o n a l d e s i g n i n d i s t a n c e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 4 e d u c a t i o n c a n be b a s e d on a r a t i o n a l a nd t h e o r e t i c a l r e s e a r c h b a s e . P u r p o s e T h i s s t u d y i s an a t t e m p t t o b e g i n t h e p r o c e s s o f a n s w e r i n g t h e s e q u e s t i o n s ; a p r o c e s s t h a t i n v o l v e s a f u n d a m e n t a l r e a s s e s s m e n t o f t h e a p p r o a c h t o r e s e a r c h i n d i s t a n c e e d u c a t i o n t h a t has b een f o l l o w e d t h u s f a r . The s t u d y b e g i n s w i t h a c r i t i c a l e x a m i n a t i o n o f l i t e r a t u r e a n d r e s e a r c h i n t h i s f i e l d a n d c o n c l u d e s w i t h a s p e c i f i c p r o p o s a l f o r f u r t h e r r e s e a r c h u s i n g an a l t e r n a t i v e a p p r o a c h . Two a s p e c t s o f p a s t r e s e a r c h w i l l be e x a m i n e d i n d e t a i l : t h e a p p r o a c h e s t a k e n by r e s e a r c h e r s , and t h e f i n d i n g s as t h e y a p p l y t o t h e u s e o f t e l e v i s i o n . I n e x a m i n i n g t h e r e s e a r c h a p p r o a c h e s , two f a c t o r s s t a n d o u t c l e a r l y : t h e dominance o f e x p e r i m e n t a l o r q u a s i - e x p e r i m e n t a l m e t h o d o l o g i e s ; and t h e a s s u m p t i o n o f a q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e . The s i g n i f i c a n c e o f t h e r e s e a r c h f i n d i n g s i s t h a t t h e y have b e e n n e i t h e r c o n s i s t e n t n o r m e a n i n g f u l . T h i s s t u d y a r g u e s t h a t t h e s e t h r e e f a c t o r s , t h e dominance o f t h e e x p e r i m e n t a l m e thods, t h e a s s u m p t i o n o f a q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e , and t h e l a c k o f m e a n i n g f u l and c o n s i s t e n t r e s u l t s a r e e v i d e n c e o f t h e n e e d f o r a change o f a p p r o a c h ; one t h a t i s b a s e d on a q u a l i t a t i v e c o n c e p t i o n T e l e v i s i o n i n Distance Education 5 of knowledge and that uses both q u a l i t a t i v e and q u a n t i t a t i v e research methodologies. The study concludes with a proposal f o r f u r t h e r research that employs t h i s approach. The proposed research would be an e x p l o r a t o r y study to examine the processes and outcomes of l e a r n i n g and student a t t i t u d e s i n a d i s t a n c e education course that c o n s i s t s of video tapes, audio t e l e c o n f e r e n c e s and a course manual. These aspects would be examined i n r e l a t i o n to the d i f f e r e n t components of the course. D e f i n i t i o n s Distance Education Holmberg (1977) d e f i n e s "distance education" as that which: covers the various forms of study at a l l l e v e l s which are not under the continuous, immediate s u p e r v i s i o n of t u t o r s present with t h e i r students i n l e c t u r e rooms or i n the same premises but who nevertheless, b e n e f i t from the planning, guidance and t u i t i o n of a t u t o r i a l o r g a n i z a t i o n (p. 9 ) . A somewhat shorter, but more d i r e c t d e f i n i t i o n i s p r o v i d e d by Moore (1975) i n h i s d e s c r i p t i o n of t e l e m a t h i c teaching, "those teaching methods i n which because of the p h y s i c a l separateness of l e a r n e r s and teachers, the i n t e r a c t i v e , as w e l l as the p r e a c t i v e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 6 p h a s e o f t e a c h i n g , i s c o n d u c t e d t h r o u g h p r i n t , m e c h a n i c a l , o r e l e c t r o n i c d e v i c e s " (p. 5 ) . Desmond Keegan (1980) p r o v i d e s t h e most c o m p l e t e d e f i n i t i o n : The main e l e m e n t s o f a d e f i n i t i o n o f d i s t a n c e e d u c a t i o n a r e : - The s e p a r a t i o n o f t e a c h e r and l e a r n e r , w h i c h d i s t i n g u i s h e s i t f r o m f a c e - t o - f a c e l e a r n i n g ; - t h e i n f l u e n c e o f an e d u c a t i o n a l o r g a n i z a t i o n , w h i c h d i s t i n g u i s h e s i t f r o m p r i v a t e s t u d y ; - t h e u s e o f t e c h n i c a l m e d i a , u s u a l l y p r i n t , t o u n i t e t e a c h e r and l e a r n e r s and c a r r y t h e e d u c a t i o n a l c o n t e n t ; - t h e p r o v i s i o n o f two-way c o m m u n i c a t i o n so t h a t t h e s t u d e n t may b e n e f i t f r o m o r e v e n i n i t i a t e d i a l o g u e ; - t h e p o s s i b i l i t y o f o c c a s i o n a l m e e t i n g s f o r b o t h s o c i a l a n d d i d a c t i c p u r p o s e s ; and - t h e p a r t i c i p a t i o n i n an i n d u s t r i a l i z e d f o r m o f e d u c a t i o n w h i c h , i f a c c e p t e d , c o n t a i n s t h e genus o f r a d i c a l s e p a r a t i o n o f d i s t a n c e e d u c a t i o n f r o m o t h e r f o r m s (p. 33) Any one o f t h e s e d e f i n i t i o n s w o u l d s u f f i c e , b u t f o r t h e p u r p o s e s o f t h i s s t u d y t h e f o l l o w i n g w i l l be u s e d : e s s e n t i a l l y d i s t a n c e e d u c a t i o n i s any f o r m o f e d u c a t i o n i n w h i c h , f o r most o f t h e l e a r n i n g , t h e r e i s a p h y s i c a l T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 7 s e p a r a t i o n o f t h e t e a c h e r and t h e l e a r n e r . T h i s a l l o w s f o r t r a d i t i o n a l c o r r e s p o n d e n c e c o u r s e s , t e l e c o u r s e s , c o u r s e s t h a t a r e d e l i v e r e d e n t i r e l y b y t e l e v i s i o n o r o t h e r n o n - p r i n t m e d i a o r i n s t r u c t i o n t h a t i n c l u d e s o c c a s i o n a l f a c e t o f a c e m e e t i n g s . V i d e o t a p e d and A u d i o t a p e d L e c t u r e s The t e r m " v i d e o t a p e d " o r " a u d i o t a p e d l e c t u r e " i s u s e d i n t h i s s t u d y t o r e f e r t o s c r i p t e d o r "ad l i b b e d " l e c t u r e s d e l i v e r e d by f a c u l t y members i n a s t u d i o a n d r e c o r d e d on v i d e o o r a u d i o t a p e . T h e r e i s m i n i m a l u s e o f v i s u a l a i d s o r e d i t i n g t o enhance t h e p r o d u c t i o n v a l u e o f t h e v i d e o t a p e s . I n g e n e r a l , t h e o n l y v i s u a l a i d s u s e d a r e f u l l f r a m e g r a p h i c s t o i d e n t i f y k e y p o i n t s o r t e r m s and t h e o c c a s i o n a l p h o t o g r a p h , s l i d e o r o t h e r i l l u s t r a t i v e m a t e r i a l s . R e s e a r c h P a r a d i g m s A p a r a d i g m i s a f ramework u s e d t o c a t e g o r i z e i d e a s , c o n c e p t s , e v e n t s , i s s u e s - phenomena - w h i c h s h a r e some u n d e r l y i n g a t t r i b u t e s . A c h e n b a c h (1978) d e s c r i b e s i t as a " s c h e m a t i c m o d el f o r r e p r e s e n t i n g phenomena and t h e r e l a t i o n s among them. I t p r o v i d e s t e r m s and c a t e g o r i e s i n t o w h i c h c o m p l e x ' r e a l w o r l d ' phenomena a r e t r a n s l a t e d i n o r d e r t o make them e a s i e r t o g r a s p a n d s t u d y " (p. 20) . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 8 Two r e s e a r c h p a r a d i g m s a r e d i s c u s s e d i n t h i s s t u d y : t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m a nd t h e q u a l i t a t i v e p a r a d i g m . The " t e r m s and c a t e g o r i e s " t h a t e a c h p r o v i d e s a r e t h e r e s e a r c h m e t h o d o l o g i e s and c o n c e p t i o n s o f k n o w l e d g e . I n t h e c a s e o f t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m t h i s means t h e e x p e r i m e n t a l o r q u a s i - e x p e r i m e n t a l methods a d o p t e d f r o m t h e n a t u r a l s c i e n c e s and a q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e . I n t h e q u a l i t a t i v e p a r a d i g m , i t i s t h e q u a l i t a t i v e m e t h o d o l o g i e s o r i g i n a t i n g i n s o c i o l o g y a n d a n t h r o p o l o g y and a q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e . However, t h e r e i s n o t a c l e a r d i v i s i o n b e t ween t h e two p a r a d i g m s and t h e i r a s s o c i a t e d " t e r m s and c a t e g o r i e s " . A p a r a d i g m i s o n l y a g e n e r a l c o n c e p t u a l s y s t e m and o f t e n r e s e a r c h e r s who a c c e p t one p a r a d i g m may n o t a c c e p t a l l o f t h e c o n s t r u c t s n o r m a l l y a s s o c i a t e d w i t h i t (A c h e n b a c h , 1978; F i r e s t o n e , 1987; Howe, 1 9 8 8 ) . The H y p o t h e t i c o - d e d u c t i v e p a r a d i g m . T h i s i s t h e p r e d o m i n a n t p a r a d i g m i n e d u c a t i o n a l r e s e a r c h a n d a l l o f t h e r e s e a r c h r e v i e w e d i n t h i s p a p e r was c o n d u c t e d w i t h i n i t . I t has been a d o p t e d f r o m t h e n a t u r a l s c i e n c e s and has b e e n r e f e r r e d t o as t h e a g r i c u l t u r a l - b o t a n i c a l e x p e r i m e n t a l p a r a d i g m b e c a u s e o f i t s o r i g i n s i n a g r i c u l t u r a l e x p e r i m e n t a l r e s e a r c h ( P a r l e t t & H a m i l t o n , 1972) o r t h e p o s i t i v i s t p a r a d i g m b e c a u s e o f i t s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 9 p h i l o s o p h i c a l f o u n d a t i o n s (Howe, 1 9 8 8 ) . I n t h i s p a r a d i g m k n o w l e d g e i s v i e w e d as s o m e t h i n g t h a t c a n o n l y be o b j e c t i v e l y d i s c o v e r e d by o b s e r v a t i o n t h a t i s f r e e o f i n t e r e s t s , v a l u e s and p u r p o s e s . I t u s e s a d e d u c t i v e f o r m o f l o g i c i n w h i c h a h y p o t h e s i s i s f o r m u l a t e d a s t o t h e e f f e c t s o f a p a r t i c u l a r t r e a t m e n t ; an e x p e r i m e n t i s c o n d u c t e d , u s u a l l y f o l l o w i n g t h e s c i e n t i f i c e x p e r i m e n t a l method; and t h e h y p o t h e s i s i s e i t h e r a c c e p t e d o r r e j e c t e d ( C a m p b e l l & S t a n l e y , 1 9 6 3 ) . A c c o r d i n g t o E n t w i s t l e (1984) t h i s p a r a d i g m i m p l i e s " r e d u c t i o n i s m and t h e u s e o f f o r m a l o r m e c h a n i c a l m o d e l s w h i c h embody a s s u m p t i o n s a b o u t c h a i n s o f c a u s a l i t y " a n d i t a t t e m p t s t o e x p l a i n " s t u d e n t b e h a v i o u r f r o m t h e o u t s i d e , as a d e t a c h e d , o b j e c t i v e o b s e r v e r " ( p . 1 2 ) . The Q u a l i t a t i v e p a r a d i g m . The q u a l i t a t i v e p a r a d i g m ( a l s o r e f e r r e d t o as h u m a n i s t o r i n t e r p r e t i s t ) v i e w s k n o w l e d g e a s s u b j e c t i v e and s o c i a l l y c o n s t r u c t e d . T h e r e i s n o t an o b j e c t i v e r e a l i t y b u t m u l t i p l e r e a l i t i e s c o n s t r u c t e d by i n d i v i d u a l s i n t e r p r e t i n g t h e phenomena t h e y e n c o u n t e r . O b s e r v a t i o n c a n n o t be f r e e o f human i n t e n t i o n s a n d b e l i e f s b e c a u s e t h e s e a r e c o n s i d e r e d p a r t o f t h e i n d i v i d u a l ' s r e a l i t y ( H i r s c h m a n , 1 9 8 6 ) . I n s t e a d o f a t t e m p t i n g t o e x p l a i n s t u d e n t b e h a v i o u r f r o m t h e o u t s i d e , i t " i n v o l v e s a p p r o a c h e s t o r e s e a r c h r o o t e d i n p h e n o m e n o l o g y w h i c h d e r i v e f r o m a d i r e c t e x p l o r a t i o n o f T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 10 s t u d e n t s ' e x p e r i e n c e s o f l e a r n i n g . . . [ i t ] s e e k s an e m p h a t h e t i c u n d e r s t a n d i n g o f what i s i n v o l v e d i n s t u d e n t l e a r n i n g d e r i v e d f r o m s t u d e n t s ' d e s c r i p t i o n s o f what l e a r n i n g means t o them. I t i n v o l v e s a s h i f t n o t j u s t o f m e t h o d o l o g y , b u t o f p e r s p e c t i v e " ( E n t w i s t l e , 1984, p. 1 2 ) . I n c o n t r a s t t o t h e a g r i c u l t u r a l a n d b o t a n i c a l o r i g i n s o f t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m , t h e q u a l i t a t i v e p a r a d i g m d e r i v e s f r o m methods u s e d by s o c i o l o g i s t s and a n t h r o p o l o g i s t s who were s e e k i n g t o u n d e r s t a n d d i f f e r e n t c u l t u r e s (Bogdan & B i k l e n , 1982; S m i t h , J.K. 1983; J a c o b , 1987; F e t t e r m a n , 1988) M e t h o d o l o g i e s The E x p e r i m e n t a l method. T h i s method i s c l o s e l y a s s o c i a t e d w i t h t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m . A t r e a t m e n t i s a p p l i e d u n d e r c o n t r o l l e d c o n d i t i o n s ; e f f e c t s a r e m e a s u r e d and t h e r e s u l t s a r e a n a l y z e d u s i n g s t a t i s t i c a l p r o c e d u r e s t o d e t e r m i n e s i g n i f i c a n c e . The Q u a s i - e x p e r i m e n t a l method. T h i s i s a v a r i a t i o n o f t h e e x p e r i m e n t a l method i n w h i c h t h e r e s e a r c h e r does n o t h a v e c o m p l e t e c o n t r o l o v e r a l l v a r i a b l e s o r where s a m p l e s c a n n o t be drawn r a n d o m l y f r o m t h e p o p u l a t i o n ( C a m p b e l l & S t a n l e y , 1 9 6 3 ) . T h i s method i s u s e d h e a v i l y i n e d u c a t i o n a l r e s e a r c h b e c a u s e o f t h e amorphous n a t u r e o f l e a r n i n g ( i n c o n t r a s t t o s o m e t h i n g s u c h as t h e g r o w t h o f c o r n o r w h e a t ) . Use o f t h e q u a s i - e x p e r i m e n t a l method T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 11 u s u a l l y i n v o l v e s t r a d e - o f f s between i n t e r n a l and e x t e r n a l v a l i d i t y . Q u a l i t a t i v e r e s e a r c h methods. There are s e v e r a l d i f f e r e n t q u a l i t a t i v e methods but a l l p l a c e t h e emphasis on "what i s l e a r n e d " r a t h e r than "how much i s l e a r n e d " . Becker (1968) and P e r r y (1970) f o l l o w e d a s o c i a l a n t h r o p o l o g i c a l method i n t h e i r attempt t o u n d e r s t a n d student s o c i a l and academic l i f e and i n t e l l e c t u a l and e t h i c a l development. In Becker's study, the r e s e a r c h e r s became p a r t i c i p a n t o b s e r v e r s by a t t e n d i n g c l a s s e s and s o c i a l f u n c t i o n s , t a k i n g d e t a i l e d f i e l d notes and d i s c u s s i n g t h e i r o b s e r v a t i o n s w i t h the s t u d e n t s . " T h e i r a n a l y s e s i n v o l v e d r e a d i n g and r e - r e a d i n g t h e i r f i e l d - notes and a l s o l e n g t h y d i s c u s s i o n s among the r e s e a r c h team t o e s t a b l i s h t h e i r main c o n c l u s i o n s . They i l l u s t r a t e d t h e i r f i n d i n g s through the use o f comments made by s t u d e n t s which had been s e l e c t e d as t y p i c a l of a g e n e r a l l y e x p r e s s e d view" ( E n t w i s t l e , 1984, p.14). In P e r r y ' s (1970) study, open-ended i n t e r v i e w s w i t h hundreds of s t u d e n t s were conducted and then a n a l y z e d u s i n g a method s i m i l a r t o t h a t o f Becker (1968). M i l l e r & P a r l e t t (1972) r e f i n e d the methods of Becker and P e r r y and developed what they c a l l e d " i l l u m i n a t i v e e v a l u a t i o n " . In a d d i t i o n t o p a r t i c i p a n t o b s e r v a t i o n , they used s e m i - s t r u c t u r e d i n t e r v i e w s and T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 12 q u e s t i o n n a i r e s . The a n a l y s i s was s i m i l a r t o t h a t o f B e c k e r and P e r r y , b u t t h e y u s e d a p a n e l o f i n d e p e n d e n t j u d g e s t o c r o s s - c h e c k t h e r e s e a r c h e r s ' i n t e r p r e t a t i o n o f t h e common themes. R e s e a r c h e r s o f t h e p h e n o m e n o g r a p h i c t r a d i t i o n i n Sweden have gone one s t e p f u r t h e r and d e v e l o p e d what t h e y c a l l " r i g o r o u s q u a l i t a t i v e a n a l y s i s " . ( E n t w i s t l e , 1984) T h e i r d a t a i s d e r i v e d f r o m s e m i - s t r u c t u r e d i n t e r v i e w s w i t h s t u d e n t s d i s c u s s i n g t h e i r l e a r n i n g e x p e r i e n c e s . The l e a r n i n g t a k e s p l a c e e i t h e r i n " n a t u r a l i s t i c " o r " n a t u r a l " s e t t i n g s . N a t u r a l i s t i c s e t t i n g s a r e e x p e r i m e n t a l s e t t i n g s u s i n g r e a l i s t i c a l l y c o m p l e x l e a r n i n g m a t e r i a l s . "They r e s e m b l e n o r m a l s t u d y i n g i n i m p o r t a n t r e s p e c t s , b u t r e t a i n e l e m e n t s o f e x p e r i m e n t a l c o n t r o l and m a n i p u l a t i o n . " ( E n t w i s t l e , 1984, p . 1 7 ) . N a t u r a l s e t t i n g s a r e t h o s e i n w h i c h t h e r e a r e no e x p e r i m e n t a l c o n t r o l s . I n t h i s method, t h e c o n t e n t o f l e a r n i n g i s e x a m i n e d b e f o r e c o n s i d e r a t i o n i s g i v e n t o how t h e l e a r n i n g t a k e s p l a c e . The " r i g o r o u s " a s p e c t o f t h i s method r e l a t e s t o i t s a t t e m p t t o " i d e n t i f y c o n c e p t s w h i c h d e s c r i b e i m p o r t a n t d i f f e r e n c e s i n t h e ways i n w h i c h s t u d e n t s l e a r n and s t u d y . The s p e c i f i c d i f f e r e n c e s g i v e r i s e t o d i s t i n c t c a t e g o r i e s a n d e a c h c a t e g o r y i s d e f i n e d , o r d e l i m i t e d , i n t e r m s o f t h o s e e x t r a c t s f r o m t h e i n t e r v i e w s w h i c h t o g e t h e r T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 13 c o n s t i t u t e i t s m e a n i n g . I n t h i s way o t h e r r e s e a r c h e r s a r e a b l e t o f o l l o w s i m i l a r p r o c e d u r e s a n d t h e n make d e t a i l e d c o m p a r i s o n s b etween t h e c o n c e p t s and c a t e g o r i e s i d e n t i f i e d i n t h e v a r i o u s s t u d i e s . T h i s p r o c e d u r e t h u s c a r r i e s t h e ' h a l l m a r k ' o f s c i e n t i f i c r e s e a r c h , w h i l e n o t f o l l o w i n g t h e methods o f t h e n a t u r a l s c i e n c e s " ( E n t w i s t l e , 1984, p. 1 7 ) . C o n c e p t i o n s o f Knowledge The Q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e . The q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e v i e w s l e a r n i n g as e s s e n t i a l l y a r e p r o d u c t i v e p r o c e s s whereby k n o w l e d g e i s p a s s e d f r o m t e a c h e r t o l e a r n e r and s t o r e d i n t h e memory o f t h e l e a r n e r f o r l a t e r u s e . T e s t i n g c o n s i s t s o f d e t e r m i n i n g w h e t h e r o r n o t t h e l e a r n e r c a n r e p r o d u c e o r remember t h e k n o w l e d g e . T h i s v i e w i m p l i e s t h a t l e a r n i n g w i l l be o c c u r r i n g m a i n l y a t t h e b e g i n n i n g l e v e l s o f Bloom's (1956) Taxonomy o f E d u c a t i o n a l O b j e c t i v e s - K n o w l e d g e , " t h e r e c a l l o f s p e c i f i c s a n d u n i v e r s a l s , t h e r e c a l l o f methods and p r o c e s s e s , o r t h e r e c a l l o f a p a t t e r n , s t r u c t u r e o r s e t t i n g . . . The k n o w l e d g e o b j e c t i v e s e m p h a s i z e most t h e p s y c h o l o g i c a l p r o c e s s e s o f r e m e m b e r i n g " (p. 2 0 1 ) . T h i s c o n c e p t i o n o f k n o w l e d g e may a l l o w f o r some l e a r n i n g a t t h e s e c o n d l e v e l o f Bloom's taxonomy, c o m p r e h e n s i o n , b u t n o t h i n g a t t h e h i g h e r T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 14 l e v e l s o f a p p l i c a t i o n , a n a l y s i s , s y n t h e s i s , o r e v a l u a t i o n . The Q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e . W i t h a q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e , t h e r e i s l e s s e m p h a s i s on "how much i s l e a r n e d " a n d more on "what i s l e a r n e d " . L e a r n i n g i s n o t v i e w e d as a r e p r o d u c t i v e o r r e m e m b e r i n g p r o c e s s b u t one i n w h i c h t h e l e a r n e r a c t i v e l y i n t e r p r e t s , a d a p t s and a p p l i e s t h e k n o w l e d g e o r i n f o r m a t i o n he o r she a c q u i r e s . Where t h e q u a n t i t a t i v e c o n c e p t i o n d e a l s w i t h e d u c a t i o n a l o b j e c t i v e s m a i n l y a t t h e b e g i n n i n g l e v e l s o f Bloom's taxonomy, t h e q u a l i t a t i v e c o n c e p t i o n i s c o n c e r n e d w i t h t h e c o m p l e t e r a n g e o f o b j e c t i v e s f r o m t h e l o w e r l e v e l s o f t h e taxonomy t o t h e h i g h e r l e v e l o b j e c t i v e s o f a p p l i c a t i o n , a n a l y s i s , s y n t h e s i s a n d e v a l u a t i o n . The q u a l i t a t i v e c o n c e p t i o n e x p a n d s t h e p e r s p e c t i v e o f t h e r e s e a r c h e r and a l l o w s d i f f e r e n c e s i n l e a r n i n g t o be d e t e c t e d t h a t a r e h i d d e n when q u a n t i t a t i v e m e a s ures o f k n o w l e d g e a r e a p p l i e d . F o r e x a m p l e , a q u a l i t a t i v e s t u d y by J o h a n s s o n e t a l . ( c i t e d i n D a h l g r e n , 1984) r e v e a l e d t h a t u n d e r g r a d u a t e m e c h a n i c a l e n g i n e e r i n g s t u d e n t s e n r o l l e d i n a c o u r s e i n m e c h a n i c s h ad two f u n d a m e n t a l l y d i f f e r e n t c o n c e p t i o n s o f f o r c e . The s t u d e n t s were a s k e d t h e f o l l o w i n g r e l a t i v e l y t r i v i a l q u e s t i o n : "A c a r i s d r i v e n a l o n g a motorway i n a s t r a i g h t l i n e a t a h i g h c o n s t a n t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 15 s p e e d . What f o r c e s a c t on t h e c a r ? " . By a n a l y z i n g ( q u a l i t a t i v e l y ) t h e s t u d e n t s ' a n s w e r s , J o h a n s s o n e t a l . , f o u n d t h a t most h e l d t h e c o r r e c t N e w t o n i a n c o n c e p t i o n o f f o r c e ( f o r c e i s o n l y i n v o l v e d when t h e r e i s a change i n v e l o c i t y o r d i r e c t i o n ) b u t a s i g n i f i c a n t p r o p o r t i o n h e l d an A r i s t o t e l i a n c o n c e p t i o n o f f o r c e ( f o r c e i s a l w a y s i n v o l v e d i n p h y s i c a l e v e n t s and t h e r e l a t i v e s t r e n g t h o f t h e f o r c e s d e t e r m i n e s t h e o u t c o m e ) . F u r t h e r m o r e , most o f t h e s t u d e n t s who h e l d t h e A r i s t o t e l i a n c o n c e p t i o n o f f o r c e b e f o r e t h e c o u r s e a l s o h e l d t h a t c o n c e p t i o n a f t e r t h e c o u r s e . The r e s e a r c h e r s c o n c l u d e d t h a t t h e s e d i f f e r e n c e s w o u l d n o t have been d e t e c t e d by t r a d i t i o n a l q u a n t i t a t i v e t e s t s : "When t h e q u e s t i o n s a s k e d o f s t u d e n t s a r e a t b a s e q u a n t i t a t i v e o r f a i l t o p e n e t r a t e b e y o n d what c a n be more o r l e s s u n r e f l e c t i v e l y r e t a i n e d i n memory, s t u d e n t s ' m i s a p p r e h e n s i o n s a r e d i s g u i s e d w i t h i n s p u r i o u s l y s a t i s f a c t o r y a n s w e r s o r c l o a k e d i n t e c h n i c a l j a r g o n " ( D a h l g r e n , 1984, p. 3 5 ) . S o u r c e s o f R e s e a r c h L i t e r a t u r e The r e s e a r c h a n d l i t e r a t u r e r e v i e w e d was o b t a i n e d f r o m t h r e e main s o u r c e s : 1) A c o m p u t e r s e a r c h o f E d u c a t i o n a l R e s o u r c e s I n f o r m a t i o n C e n t e r ( E R I C ) , C u r r e n t I n d e x t o J o u r n a l s i n E d u c a t i o n ( C U E ) , and R e s e a r c h i n E d u c a t i o n (RIE) . The s e a r c h c o n c e n t r a t e d on l i t e r a t u r e t h a t d e a l t w i t h T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 16 s t u d e n t a c h i e v e m e n t i n d i s t a n c e e d u c a t i o n c o u r s e s , c o m p a r i s o n s o f d i s t a n c e e d u c a t i o n c o u r s e s w i t h f a c e t o f a c e i n s t r u c t i o n a nd s t u d i e s t h a t d e a l t w i t h t h e e f f e c t i v e n e s s , i n t e r m s o f s t u d e n t a c h i e v e m e n t a n d s a t i s f a c t i o n , o f d i f f e r e n t components o f d i s t a n c e e d u c a t i o n c o u r s e s . 2) A m anual s e a r c h o f t h e c a r d and m i c r o f i c h e c a t a l o g u e s o f t h e U n i v e r s i t y o f B r i t i s h C o l u m b i a l i b r a r i e s f o r p u b l i c a t i o n s d e a l i n g w i t h d i s t a n c e e d u c a t i o n , t e l e c o u r s e s , e d u c a t i o n a l t e l e v i s i o n , m e d i a s e l e c t i o n , i n s t r u c t i o n a l d e s i g n a n d c o r r e s p o n d e n c e e d u c a t i o n . 3) P e r s o n a l a n d d e p a r t m e n t a l f i l e s a t t h e U n i v e r s i t y o f B r i t i s h C o l u m b i a , G u i d e d I n d e p e n d e n t S t u d y ; and D e p a r t m e n t o f E d u c a t i o n a l P s y c h o l o g y and S p e c i a l E d u c a t i o n . The l a t t e r c o n s i s t e d o f l i t e r a t u r e o b t a i n e d f r o m f a c u l t y members i n t h e d e p a r t m e n t . O r g a n i z a t i o n o f t h e R e v i e w The s e a r c h y i e l d e d o v e r 400 t i t l e s o f w h i c h a b o u t 80 were r e v i e w e d . The l i t e r a t u r e has been o r g a n i z e d i n t o t h r e e b r o a d c a t e g o r i e s : 1) T h e o r y : S e v e r a l a t t e m p t s have been made t o p r o v i d e a t h e o r e t i c a l f r a m e w o r k t o e x p l a i n how l e a r n i n g f r o m t e l e v i s i o n o r v i d e o o c c u r s . T e l e v i s i o n i n Distance Education 17 2) Research problems. Many reviews c r i t i c a l of the research i n t h i s area have been w r i t t e n . This study attempts to summarize some of the more f r e q u e n t l y mentioned and re l e v a n t areas of concern. 3) Experimental Research. Despite the problems with conducting t h i s type of research, some i n v e s t i g a t o r s have persevered. 4) Quasi-Experimental Research. Most of the research i n t h i s f i e l d i s of t h i s nature where random assignment i s not p o s s i b l e , and v a r i a b l e s are d i f f i c u l t to c o n t r o l . The author was unable to f i n d any research which employed a q u a l i t a t i v e methodology or which appeared to approach the research questions with a q u a l i t a t i v e conception of knowledge. In the absence of t h i s type of research, t h i s review w i l l attempt t o demonstrate how the experimental and quasi-experimental s t u d i e s could have been improved i f a q u a l i t a t i v e approach had been followed or i n c o r p o r a t e d as part of the study. T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 18 C h a p t e r I I - R e v i e w o f R e l a t e d T h e o r y a nd R e s e a r c h T h e o r y I n t r o d u c t i o n U n f o r t u n a t e l y , much o f t h e t h e o r e t i c a l l i t e r a t u r e i n t h i s f i e l d f o c u s e s on t h e t e a c h i n g e f f e c t i v e n e s s o f i n s t r u c t i o n a l t e l e v i s i o n r a t h e r t h a n on how t e l e v i s i o n a f f e c t s l e a r n i n g o r how l e a r n i n g f r o m t e l e v i s i o n o c c u r s ; t h a t i s , i t a t t e m p t s t o e x p l a i n how i n s t r u c t i o n a l t e l e v i s i o n c a n b e s t be u s e d t o p r e s e n t l e s s o n m a t e r i a l w i t h o u t t r y i n g t o e x p l a i n how i t may be a f f e c t i n g l e a r n e r s a n d how i t may i n t e r a c t w i t h t h e i r m e n t a l p r o c e s s e s . N o n e t h e l e s s , s e v e r a l a t t e m p t s have been made t o p r o v i d e a c o n c e p t u a l f ramework t o e x p l a i n t h e p r o c e s s o f l e a r n i n g f r o m t e l e v i s i o n . I n t e r a c t i o n o f M e d i a , C o g n i t i o n and L e a r n i n g Salomon (1976) has p r o v i d e d t h e most c o m p r e h e n s i v e t h e o r y , w h i c h , w h i l e i t d e a l s w i t h l e a r n i n g f r o m a l l m e d i a , has c l e a r i m p l i c a t i o n s f o r t e l e v i s i o n o r v i d e o l e a r n i n g . A c c o r d i n g t o Salomon, t h e r e a r e t h r e e m a j o r f a c t o r s w h i c h may make a d i f f e r e n c e i n l e a r n i n g f r o m m e d i a . These a r e t h e t e c h n o l o g y o f t r a n s m i s s i o n , t h e c o n t e n t t r a n s m i t t e d , a n d t h e s y m b o l s y s t e m s u s e d b y t h e medium. T h e r e i s c o n s i d e r a b l e r e s e a r c h e v i d e n c e t o s u g g e s t t h a t t h e r e i s no s i g n i f i c a n t d i f f e r e n c e i n l e a r n i n g when o n l y t h e t e c h n o l o g y i s c h a n g e d (Chu & T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 19 Schramm, 1 9 6 8 ) . I n f a c t Salomon (1974) i s c r i t i c a l o f many o f t h e s e s t u d i e s b e c a u s e he s a y s t h e y p u r p o r t t o compare t h e e f f e c t i v e n e s s o f l e a r n i n g f r o m d i f f e r e n t m e d i a , when r e a l l y t h e y a r e s t u d y i n g t h e t e c h n o l o g y o f t r a n s m i s s i o n . T h i s i s c a u s e d by h o l d i n g c o n s t a n t a l l a s p e c t s o f t h e p r e s e n t a t i o n b e i n g s t u d i e d e x c e p t t h e t e c h n o l o g y o f t r a n s m i s s i o n . Salomon (1976) g i v e s an ex a m p l e t o i l l u s t r a t e t h i s p o i n t . C h i l d r e n who f a c e d i f f i c u l t i e s w i t h r e a d i n g do n o t r e a d any b e t t e r o r worse i f t h e m a t e r i a l i s p r i n t e d r a t h e r t h a n p r o j e c t e d . C h a n g i n g t h e t e c h n o l o g y t h r o u g h w h i c h t h e m a t e r i a l i s t r a n s m i t t e d t o them makes no d i f f e r e n c e . S i m i l a r l y , a t e l e v i s e d i n s t r u c t i o n a l s e s s i o n i s no more e f f e c t i v e t h a n a l i v e one s i m p l y by v i r t u e o f i t s b e i n g t e l e v i s e d (p. 25) As f o r c o n t e n t , " t h e d i f f e r e n c e i n l e a r n i n g w h i c h d i f f e r e n t c o n t e n t s . m a k e a r e e i t h e r s e l f - e v i d e n t o r u n r e l a t e d t o m e d i a " (Salomon, 1976, p . 2 5 ) . The s e l f - e v i d e n t d i f f e r e n c e s a r e when, f o r i n s t a n c e , t e l e v i s i o n i s u s e d t o show movement o r d y n a m i c p r o c e s s e s w h i c h w o u l d be d i f f i c u l t o r i m p o s s i b l e t o c o n v e y i n a n o t h e r medium. A c c o r d i n g t o Salomon ( 1 9 7 6 ) , i t i s t h e s y m b o l s y s t e m o f t h e medium w h i c h makes t h e c r u c i a l d i f f e r e n c e t o T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 20 l e a r n i n g . U n f o r t u n a t e l y he i s somewhat ambiguous a b o u t what he means by " s y m b o l s y s t e m " . He seems t o use t h e t e r m s " s y m b o l s y s t e m s " , " s y m b o l i c c o d e s " , "modes o f p r e s e n t a t i o n " and " f o r m a t s " i n t e r c h a n g e a b l y . I n a n a l y z i n g t h e work o f Salomon (1974, 1976, 1979) a n d t h e work o f B a t e s ( 1 9 8 1 a ) , who r e f e r s t o Salomon, i t w o u l d a p p e a r t h a t t h e s e c o n c e p t s c a n be v i e w e d h i e r a r c h i c a l l y f r o m g e n e r a l t o s p e c i f i c . The s y m b o l s y s t e m s a r e t h e most g e n e r a l and e a c h e m p l o y s p a r t i c u l a r s y m b o l i c c o d e s t o c o n v e y m e a n i n g . The c o d e s c a n t h e n be u s e d i n d i f f e r e n t f o r m a t s o r modes o f p r e s e n t a t i o n . T h e r e a r e t h r e e b a s i c s y m b o l s y s t e m s : d i g i t a l , a n a l o g i c , a n d i c o n i c . I n t h e d i g i t a l s y s t e m m e a n i n g i s c o n v e y e d by s u c h codes as w r i t t e n l a n g u a g e , m u s i c a l n o t a t i o n , a n d m a t h e m a t i c a l s y m b o l s . I n t h e a n a l o g i c s y s t e m m e a n i n g i s c o d e d i n c o n t i n u o u s e l e m e n t s t h a t have r e o r g a n i z e d m e a n i n g and f o r m . V o i c e q u a l i t y , p e r f o r m e d m u s i c a n d d a n c e a r e some e x a m p l e s . I n t h e i c o n i c s y s t e m , t h e code i s p i c t o r i a l r e p r e s e n t a t i o n s w h i c h have a v a r i e t y o f p o s s i b l e v i s u a l e x p e r i e n c e s and me a n i n g s (Salomon, 1979; B a t e s , 1 9 8 1 a ) . The f o r m a t s o r modes o f p r e s e n t a t i o n a r e a t t h e b o t t o m o f t h e h i e r a r c h y . Zooming, a n d c u t t i n g a r e e x a m p l e s o f t e l e v i s i o n f o r m a t s (a m o v i n g image o r f i l m code i n t h e i c o n i c s y m b o l s y s t e m ) ; n a r r a t i v e o r d i a l o g u e a r e e x a m p l e s o f f o r m a t s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 21 u s e d i n n o v e l s (a w r i t t e n l a n g u a g e code i n t h e d i g i t a l s y m b o l s y s t e m ) . A c c o r d i n g t o Salomon ( 1 9 7 6 ) , l e a r n i n g i s a f o u r - w a y i n t e r a c t i o n b e t w e e n t h e s y m b o l s y s t e m ( a l o n g w i t h i t s c o d e s and f o r m a t s ) , t h e c o n t e n t , t h e t a s k and t h e a b i l i t i e s o f t h e l e a r n e r . The s y m b o l s y s t e m a n d t h e a c c o m p a n y i n g c o d e s and f o r m a t s u s e d i n a p r e s e n t a t i o n a f f e c t d i f f e r e n t m e n t a l p r o c e s s e s . These m e n t a l p r o c e s s e s , i n t u r n , a f f e c t how t h e i n f o r m a t i o n i n t h e p r e s e n t a t i o n w i l l be p r o c e s s e d . "Thus a v e r b a l d e s c r i p t i o n o f an o b j e c t and a p i c t u r e o f i t do n o t d i f f e r o n l y i n a p p e a r a n c e , t h e y a l s o c a l l upon d i f f e r e n t m e n t a l s k i l l s w h i c h a r e t h e n u s e d t o p r o c e s s t h e c o n v e y e d i n f o r m a t i o n " (Salomon, 1976, p. 2 6 ) . B e c a u s e l e a r n e r s w i l l d i f f e r i n t e r m s o f t h e i r m a s t e r y o f t h e d i f f e r e n t m e n t a l s k i l l s , " t h e c o g n i t i v e e f f e c t s o f m e d ia a t t r i b u t e s i n t e r a c t w i t h i n d i v i d u a l d i f f e r e n c e s " ( Salomon, 1976, p . 2 6 ) . T e l e v i s i o n , a c c o r d i n g t o t h i s t h e o r y , i s p a r t i c u l a r l y p o w e r f u l b e c a u s e i t c a n use a l l t h r e e s y m b o l s y s t e m s a l o n g w i t h a v a r i e t y o f c o d e s a n d f o r m a t s t o c o n v e y a message. T h i s a l l o w s i t t o c a l l upon and t h u s a c t i v a t e a p a r t i c u l a r m e n t a l p r o c e s s , as w e l l as o v e r t l y s i m u l a t e a m e n t a l p r o c e s s w h i c h m i g h t o t h e r w i s e have t o be c o v e r t l y e x e c u t e d by a l e a r n e r . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 22 Take f o r i n s t a n c e t h e a c t o f z o o m i n g i n . T h i s i s a t r a n s f o r m a t i o n by means o f w h i c h a p a r t i c u l a r d e t a i l i s b e i n g s i n g l e d o u t f r o m a w i d e r a nd r i c h e r a r r a y . The zoom p r o v i d e s t h e l i n k between" t h e l o n g s h o t v i e w a nd t h e c l o s e up. I n t h e a b s e n c e o f t h e zoom, t h e v i e w e r i s r e q u i r e d t o p r o v i d e t h e same l i n k c o v e r t l y on h i s own. The zoom, when u s e d , s i m u l a t e s o v e r t l y t h e same p r o c e s s . G r a d u a l c h a n g e s o f a n g l e s , r o t a t i o n i n s p a c e , r a p i d s h i f t s , s p l i t s c r e e n s , a n d t h e l i k e , have t h e p o t e n t i a l o f a c c o m p l i s h i n g t h e same f u n c t i o n : t h e y overtly supplant a m e n t a l s k i l l , t r a n s f o r m a t i o n o r , i f you w i s h , p r o c e s s f o r t h e l e a r n e r (Salomon, 1976, p.27) F i n a l l y , Salomon makes a d i s t i n c t i o n b e t w e e n t h e m e n t a l s k i l l s t h a t a medium " a l l o w s " a n d t h o s e w h i c h i t "demands". He s a y s t h a t t h e s y m b o l i c c o d e s u s e d by t e l e v i s i o n may a l l o w t h e l e a r n e r t o g e t away w i t h " s h a l l o w e r " p r o c e s s i n g , t h a n a book o r a v e r b a l d e s c r i p t i o n b e c a u s e t h e message r e q u i r e s l e s s r e c o d i n g and m e n t a l e l a b o r a t i o n (Salomon, 197 9 ) . T h i s t h e o r y , t h e n , does n o t s u g g e s t t h a t t e l e v i s i o n l e a r n i n g i s d i s t i n c t f r o m v e r b a l l e a r n i n g , o b s e r v a t i o n a l l e a r n i n g o r any o t h e r " c o n v e n t i o n a l " t h e o r y o f l e a r n i n g . I n s t e a d , Salomon seems t o be s u g g e s t i n g t h a t t h e c r i t i c a l a s p e c t o f a l l l e a r n i n g i s t h e s y m b o l s y s t e m s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 23 u s e d by t h e medium and t h e c o d e s a n d f o r m a t s e m p l o y e d t o c o n v e y t h e message. T e l e v i s i o n , he c o n c l u d e s , o f f e r s g r e a t e r p o t e n t i a l f o r l e a r n i n g b e c a u s e i t i s a b l e t o e m p l o y a g r e a t e r v a r i e t y o f s y m b o l i c c o d e s . Many o f t h e s e c o d e s a r e u n i q u e t o t e l e v i s i o n and a c t i v a t e a nd c u l t i v a t e d i f f e r e n t i n f o r m a t i o n p r o c e s s i n g s k i l l s w h i c h i n t e r a c t w i t h t h e l e a r n e r a nd t h e t a s k . C r i t i c i s m o f Salomon's t h e o r y . B a t e s (1981a) i s c r i t i c a l o f Salomon's t h e o r y b e c a u s e o f i t s g e n e r a l i t y . He s a y s Salomon has f a i l e d t o i d e n t i f y t h e d i f f e r e n t s y m b o l s y s t e m s u s e d by d i f f e r e n t m e d i a o r w h i c h m e n t a l s k i l l s a r e d e v e l o p e d by w h i c h m e d i a . B u t i t seems t h a t t h e v a l u e o f a t h e o r y i s p r e c i s e l y i t s g e n e r a l i t y , a nd s u r e l y w h i c h s y m b o l s y s t e m s a r e e m p l o y e d by w h i c h m e d i a a r e s e l f - e v i d e n t . F i n a l l y , B a t e s ' c r i t i c i s m t h a t Salomon f a i l e d t o i d e n t i f y w h i c h m e n t a l s k i l l s a r e d e v e l o p e d b y w h i c h m e d i a seems t o m i s s t h e p o i n t . Salomon m a i n t a i n s m e n t a l s k i l l s a r e n o t m e d i a - s p e c i f i c , b u t c o d e - o r f o r m a t - s p e c i f i c , so a p a r t i c u l a r m e n t a l s k i l l may be a c t i v a t e d o r s u p p l a n t e d by s e v e r a l d i f f e r e n t m e d i a i f t h e a p p r o p r i a t e code o r f o r m a t i s e m p l o y e d . W h i l e Salomon has made an a m b i t i o u s a t t e m p t t o e x p l a i n how we l e a r n f r o m m e d i a , he has n o t r e v e a l e d a n y t h i n g u n i q u e a b o u t l e a r n i n g f r o m t e l e v i s i o n . H i s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 24 t h e o r y a t t e m p t s t o e x p l a i n a l l l e a r n i n g , no m a t t e r what t h e medium. A c c o r d i n g t o h i s t h e o r y , i t w o u l d seem t h a t l e a r n i n g f r o m t e l e v i s i o n i n v o l v e s f u n d a m e n t a l l y t h e same p r o c e s s as any o t h e r t y p e o f l e a r n i n g . The d i f f e r e n c e s o c c u r i n t h e s y m b o l i c c o d e s o f t h e medium ( e . g . , w r i t t e n l a n g u a g e - d i g i t a l c o d e ; m u s i c - a n a l o g i c c o d e ; s t i l l p i c t u r e s - i c o n i c code e t c . ) , n o t i n t h e a c t u a l p r o c e s s . Thus l e a r n i n g f r o m p r i n t , t e l e v i s i o n , o r t h e c l a s s r o o m l e c t u r e i n v o l v e t h e same p r o c e s s w i t h v a r y i n g s y m b o l i c c o d e s , a nd t h u s v a r y i n g i n t e r a c t i o n s b e t w e e n t h e medium, t h e c o n t e n t , and t h e l e a r n e r . M e n t a l S k i l l s and t h e M e d i a O l s o n a n d B r u n e r (1974) have t a k e n an a p p r o a c h t o t e l e v i s i o n l e a r n i n g s i m i l a r t o t h a t o f Salomon. They c o n t e n d t h a t c o n t e n t i s n o t medium s p e c i f i c , a n d t h e r e f o r e makes l i t t l e d i f f e r e n c e t o l e a r n i n g f r o m t e l e v i s i o n o r any m e d i a . I n t h e i r v i e w , " i n s t r u c t i o n a l means c o n v e r g e as t o t h e k n o w l e d g e c o n v e y e d , b u t d i v e r g e as t o t h e [ m e n t a l ] s k i l l s t h e y assume a n d d e v e l o p " ( O l s o n & B r u n e r , 1974, p. 1 4 9 ) . I n o t h e r words c o n t e n t o r k n o w l e d g e c a n be t a u g h t e f f e c t i v e l y b y any medium, b u t t h e m e n t a l s k i l l s r e q u i r e d t o u n d e r s t a n d a n d a p p l y t h a t k n o w l e d g e c a n be c u l t i v a t e d more e f f e c t i v e l y b y some m e d i a t h a n o t h e r s . T h i s seems t o c o n t r a d i c t Salomon who m a i n t a i n s t h a t t h e m e n t a l s k i l l s c a l l e d upon, T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 25 a c t i v a t e d , o r s u p p l a n t e d depend on t h e c o d e s o r f o r m a t s o f t h e medium, n o t n e c e s s a r i l y t h e medium i t s e l f . F o r i n s t a n c e , a v e r b a l d e s c r i p t i o n b y a t e a c h e r a n d a t e l e v i s e d v e r b a l d e s c r i p t i o n w o u l d employ t h e same c o d e s , a l t h o u g h t h e y i n v o l v e d i f f e r e n t m e d i a . However, t h i s c o n t r a d i c t i o n may be more a p p a r e n t t h a n r e a l , b e c a u s e i t w o u l d a p p e a r t h a t O l s o n a nd B r u n e r a r e r e f e r r i n g t o t h e f o r m a t s w h i c h a r e u n i q u e t o a s p e c i f i c medium. F o r i n s t a n c e , t e l e v i s i o n and a c l a s s r o o m l e c t u r e h ave some f o r m a t s i n common, b u t e a c h has i t own u n i q u e f o r m a t s - t e l e v i s i o n has c u t s , zooms, a n d o t h e r p r o d u c t i o n t e c h n i q u e s w h i c h w o u l d f a v o r c e r t a i n m e n t a l s k i l l s , w h e r e a s a l e c t u r e has i n t e r a c t i v i t y w h i c h m i g h t e nhance o t h e r s . O l s o n a n d B r u n e r (1974) s a y t e l e v i s i o n has t h e a d v a n t a g e t h a t i t c a n t a p s k i l l s t h a t a r e more r e a d i l y a v a i l a b l e t h a n t h o s e r e q u i r e d f o r v e r b a l l e a r n i n g w h i c h c o n v e y s i n f o r m a t i o n t h r o u g h a s y m b o l i c s y s t e m t h a t r e q u i r e s a h i g h d e g r e e o f l i t e r a c y i n t h a t medium. T h i s r e l a t e s t o Salomon's (1979) a s s e r t i o n t h a t v e r b a l l e a r n i n g may demand " d e e p e r " p r o c e s s i n g t h a n t e l e v i s i o n l e a r n i n g , d e p e n d i n g on t h e f o r m a t e m p l o y e d b y t h e t e l e v i s i o n p r e s e n t a t i o n . F o r O l s o n and B r u n e r , t e l e v i s i o n does n o t r e q u i r e a h i g h d e g r e e o f l i t e r a c y a n d s o i t i s i d e a l f o r m o d e l l i n g o r o b s e r v a t i o n a l T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 26 l e a r n i n g . I t c a n show what t o do as w e l l as what n o t t o do a n d c a n make e x p l i c i t t h e d e c i s i o n s made i n t h e c o u r s e o f t h e a c t i v i t y . " T e c h n o l o g i c a l m e d i a c a n g r e a t l y f a c i l i t a t e t h e s e p r o c e s s e s by h i g h l i g h t i n g i n v a r i o u s ways t h e c r i t i c a l p o i n t s i n t h e p e r f o r m a n c e . S l o w m o t i o n o r s t o p p e d a c t i o n as w e l l as d e s c r i p t i o n s a n d d r a w i n g s ( i n c l u d i n g c a r i c a t u r e s ) may have t h i s e f f e c t " ( O l s o n & B r u n e r , 1974, p. 1 4 8 ) . Once a g a i n t h i s i s s i m i l a r t o Salomon's v i e w t h a t some o f t h e f o r m a t s e m p l o y e d by t e l e v i s i o n s u c h as t h e zoom, c a n a c t i v a t e o r s u p p l a n t c e r t a i n m e n t a l p r o c e s s e s by s h o w i n g t r a n s f o r m a t i o n s . One n o t e o f c a u t i o n s h o u l d be made h e r e . I t s h o u l d n o t be assumed t h a t b e c a u s e some o f t h e f o r m a t s o f t e l e v i s i o n may a l l o w f o r " s h a l l o w e r " m e n t a l p r o c e s s i n g t h a t t e l e v i s i o n i s n e c e s s a r i l y an e a s i e r medium f o r t h e l e a r n e r t o a c c e s s . A s t u d y a t t h e B r i t i s h Open U n i v e r s i t y c o n c l u d e d t h a t s t u d e n t s n e e d e d t o l e a r n t e l e v i s i o n w a t c h i n g s k i l l s i n o r d e r t o p r o p e r l y u n d e r s t a n d t h e c a s e - s t u d y d o c u m e n t a r i e s u s e d i n a S o c i a l S c i e n c e c o u r s e ( B a t e s & G a l l a g h e r , 1 9 7 7 ) . The s t u d y f o u n d t h a t t h e t e l e v i s i o n p r o g r a m s were b e i n g u s e d t o e n c o u r a g e s t u d e n t s t o u s e h i g h e r l e v e l s k i l l s s u c h as a n a l y z i n g t h e t e l e v i s i o n m a t e r i a l u s i n g t h e t h e o r y p r o v i d e d i n t h e p r i n t m a t e r i a l , a p p l y i n g what t h e y T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 27 l e a r n e d i n t h e p r i n t t o t h e s i t u a t i o n s i n t h e t e l e v i s i o n p r o g r a m s , g e n e r a l i z i n g f r o m t h e s p e c i f i c e x a m p l e s i n t h e t e l e v i s i o n p r o g r a m s , a n d e v a l u a t i n g t h e v a l u e o f t h e p r i n c i p l e s p r e s e n t e d i n t h e p r i n t as t h e y r e l a t e d t o t h e e x a m p l e s p r o v i d e d i n t h e t e l e v i s i o n p r o g r a m s . However, i n e x a m i n i n g t h e s t u d e n t e v a l u a t i o n s o f t h e c o u r s e , t h e r e s e a r c h e r s f o u n d t h a t " L e s s t h a n o n e - t h i r d o f s t u d e n t s , f o r any programme, b o t h u n d e r s t o o d t h e p u r p o s e o f s u c h programmes and a p p e a r e d a b l e t o use t h e programme m a t e r i a l i n t h e ways s u g g e s t e d . . . a b o v e . " ( B a t e s , 1981a, p. 1 8 ) . Schramm (1977b) a l s o r e m i n d s us t h a t a l l c o d i n g s y s t e m s must be l e a r n e d . We l e a r n t o u s e t h e d i g i t a l c o d i n g s y s t e m i n s c h o o l ( e . g . , l a n g u a g e and m a t h e m a t i c s ) b u t l i t t l e o r no i n s t r u c t i o n i s p r o v i d e d i n a n a l o g i c and i c o n i c c o d i n g s y s t e m s . B e c a u s e t e l e v i s i o n u s e s t h e i c o n i c code w h i c h i s d e n s e l y p a c k e d and c o n c r e t e , i t c a n o f f e r " s o m e t h i n g t o e v e r y o n e r e g a r d l e s s o f h i s a b i l i t y t o d e a l w i t h a b s t r a c t i o n " (Schramm, 1977b, p. 8 9 ) . B u t we s h o u l d n o t m i s t a k e n l y assume t h a t l e a r n i n g f r o m t e l e v i s i o n r e q u i r e s no s p e c i a l s k i l l s . Salomon (1979) a l s o makes t h i s p o i n t . C r i t i c i s m o f O l s o n and B r u n e r . B a t e s (1981a) i s c r i t i c a l o f O l s o n and B r u n e r ' s (1974) t h e o r y b e c a u s e o f i t s f a i l u r e t o c l e a r l y d i s t i n g u i s h b e t w e e n c o n t e n t and s k i l l s a n d b e c a u s e he b e l i e v e s some c o n t e n t i s more T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 28 e f f e c t i v e l y t a u g h t t h r o u g h some m e d i a t h a n o t h e r s . He s a y s d i f f e r e n t m e d i a may p r e s e n t k n o w l e d g e o f t h e same s u b j e c t a r e a o r c o n c e p t i n a d i f f e r e n t way. "Thus t h e e x p e r i e n c e o f ' h e a t ' c a n be r e p r e s e n t e d by words ( ' i t i s h o t ' ) , b y numbers (110°F), p h y s i c a l l y b y t o u c h ( f e e l i n g t h e h e a t ) , b y c o n c e p t ('form o f e n e r g y a r i s i n g f r o m random m o t i o n o f m o l e c u l e s o f b o d i e s ' ) o r s y m b o l i c a l l y (a man d r a g g i n g h i m s e l f t h r o u g h t h e d e s e r t ) . E a c h way o f ' k n o w i n g ' h e a t i s d i f f e r e n t " ( B a t e s , 1981a, p. 9) . F u r t h e r m o r e , he s a y s , how e a s i l y we l e a r n c o n t e n t depends t o some e x t e n t on t h e c o n t r o l c h a r a c t e r i s t i c s o f t h e medium and t h e r e f o r e " l e a r n i n g f r o m p r i n t , i n t e r m s o f c o n t e n t w o u l d seem, on a p r i o r i g r o u n d s t o be more e f f e c t i v e t h a n l e a r n i n g f r o m b r o a d c a s t t e l e v i s i o n , o t h e r t h i n g s b e i n g e q u a l " ( B a t e s , 1981a, p. 1 1 ) . W h i l e B a t e s ' c r i t i c i s m seems v a l i d , O l s o n and B r u n e r 1 s h y p o t h e s i s i s v a l u a b l e i n t h e s e n s e t h a t i t e m p h a s i z e s t h e i m p o r t a n c e o f l o o k i n g a t b o t h c o n t e n t a nd m e n t a l s k i l l s when c h o o s i n g t h e medium o f i n s t r u c t i o n . The C o n c r e t e n e s s o f T e l e v i s i o n Gagne i n d i s c u s s i o n w i t h Schramm ( 1 9 7 7 a ) , i d e n t i f i e d t e l e v i s i o n ' s a b i l i t y t o d e a l w i t h c o n c r e t e n e s s as i t s m a j o r c o n t r i b u t i o n t o l e a r n i n g : T e l e v i s i o n c a n p r o v i d e a c o n c r e t e a nd m e a n i n g f u l c o n t e x t a g a i n s t w h i c h t o l e a r n names, d e f i n i t i o n s , T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 29 a n d o t h e r v e r b a l k n o w l e d g e . I t c a n p r o v i d e c o n c r e t e r e m i n d e r s o f t h e components o f i n t e l l e c t u a l s k i l l s . I t c a n p r o v i d e c o n c r e t e i l l u s t r a t i o n s o f how c o g n i t i v e s t r a t e g i e s c a n be a p p l i e d t o new p r o b l e m s a n d new s i t u a t i o n s . . . a nd i t c a n p r o v i d e c o n c r e t e e x a m p l e s o f s i t u a t i o n s o f c h o i c e t h a t p u t f l e s h a nd b l o o d on t h e a b s t r a c t i o n s o f v a l u e s and a t t i t u d e s (Schramm, 1977a, p. 1 4 ) . M o t i o n , S i m u l t a n e i t y , D i m e n s i o n a l i t y On a more s p e c i f i c l e v e l , B u r n s (1976) has t h e o r i z e d t h a t t e l e v i s i o n f a c i l i t a t e s l e a r n i n g when i t i s u s e d f o r t h r e e s p e c i f i c p u r p o s e s : 1) f o r s h o w i n g m o t i o n , 2) s i m u l t a n e o u s p r e s e n t a t i o n s , 3) i l l u s t r a t i n g t h r e e d i m e n s i o n a l c o n c e p t s . These a l l seem t o make i n t u i t i v e s e n s e and t h e y f i t w i t h Salomon's t h e o r y . These a r e a l l a r e a s i n w h i c h t e l e v i s i o n c o u l d a c t i v a t e o r s u p p l a n t some o f t h e m e n t a l s k i l l s r e q u i r e d o f t h e l e a r n e r . B a t e s ' C h a r a c t e r i s t i c s o f T e l e v i s i o n D i s t r i b u t i o n a nd s o c i a l c h a r a c t e r i s t i c s . Thus f a r we have made r e f e r e n c e t o B a t e s (1981a) o n l y f o r h i s c r i t i c i s m s o f Salomon and O l s o n and B r u n e r . I n d o i n g so we h a v e begun t o l o o k a t h i s f ramework i n w h i c h he , i d e n t i f i e s t h r e e c h a r a c t e r i s t i c s o f t e l e v i s i o n t h a t a f f e c t l e a r n i n g : d i s t r i b u t i o n a l a nd s o c i a l , c o n t r o l , and s y m b o l i c . The d i s t r i b u t i o n a l a n d s o c i a l c h a r a c t e r i s t i c s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 30 h ave l i t t l e t o do w i t h how one a c t u a l l y l e a r n s f r o m t e l e v i s i o n , b u t i t c o u l d be a r g u e d t h a t t h e y do a f f e c t l e a r n i n g a n d so t h e y do m e r i t some m e n t i o n . T e l e v i s i o n i s a f a m i l i a r medium f o r most p e o p l e . I t i s r e l a t i v e l y e a s y t o u s e and has t h e power t o be a t t r a c t i v e a nd e n t e r t a i n i n g . Thus, B a t e s a r g u e s , i t c a n p r o v i d e a c c e s s t o l e a r n i n g , a l t h o u g h t h i s a l o n e w i l l n o t e n s u r e t h a t l e a r n i n g w i l l t a k e p l a c e , and o f c o u r s e t h i s i s n o t u n i q u e t o t e l e v i s i o n . T h i s n o t i o n o f " a c c e s s " i s s i m i l a r t o t h e v i e w o f O l s o n and B r u n e r (1974) t h a t t e l e v i s i o n i s more a c c e s s i b l e t o l e a r n e r s b e c a u s e i t does n o t r e q u i r e a h i g h d e g r e e o f l i t e r a c y . C o n t r o l c h a r a c t e r i s t i c s . The s e c o n d f e a t u r e o f B a t e s ' (1981a) f r a m e w o r k i s c o n t r o l , and t h i s comes a b i t c l o s e r t o d e a l i n g w i t h t h e a c t u a l l e a r n i n g p r o c e s s . U n l i k e p r i n t , b r o a d c a s t t e l e v i s i o n does n o t g i v e t h e l e a r n e r s any c o n t r o l o v e r how t h e y p a c e t h e i r l e a r n i n g . They have l i t t l e c h o i c e as t o when t h e y c a n w a t c h t h e p r o g r a m s a n d when t h e y a r e w a t c h i n g , t h e y a r e l o c k e d i n t o a p a c e t h a t has been d e t e r m i n e d by t h e p r o d u c e r s o f t h e p r o g r a m s . They c a n n o t s t o p t h e b r o a d c a s t and go b a c k t o a p o i n t t h e y m i s s e d . I n a d d i t i o n , b r o a d c a s t t e l e v i s i o n c a n n o t accommodate d i f f e r e n t l e v e l s e a s i l y , "The c o n t i n u o u s a n d f i x e d p a c e o f a programme does n o t a l l o w f o r i n d i v i d u a l s t o r e - w o r k o r jump i n t h e i r T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 31 t h i n k i n g t o t h e l e v e l w h i c h b e s t s u i t s them" ( B a t e s , 1981a, p. 4 ) . However, t h i s p r o b l e m c a n be e l i m i n a t e d t h r o u g h t h e use o f v i d e o t a p e , w h i c h u n l i k e t e l e v i s i o n , g i v e s l e a r n e r s a h i g h d e g r e e o f c o n t r o l b e c a u s e t h e t a p e c a n be s t o p p e d a t t h e l e a r n e r s ' d i s c r e t i o n , b r o a d c a s t s c a n be t a p e d f o r l a t e r v i e w i n g a t a more c o n v e n i e n t t i m e , and segments c a n be r e v i e w e d f o r c l a r i f i c a t i o n . S y m b o l i c c h a r a c t e r i s t i c s . F i n a l l y , B a t e s d e a l s w i t h what he c a l l s t h e " s y m b o l i c " c h a r a c t e r i s t i c s o f t e l e v i s i o n . T h i s i s e s s e n t i a l l y a r e w o r k i n g o f Salomon's (1976) t h e o r y d i s c u s s e d e a r l i e r . T h e r e a r e two a s p e c t s t o B a t e s ' v e r s i o n : what he c a l l s t h e g e n e r a l a u d i o - v i s u a l c h a r a c t e r i s t i c s o f t e l e v i s i o n w h i c h a r e r o u g h l y s i m i l a r i n c o n c e p t t o Salomon's " f o r m a t s " , and t h e s y m b o l s y s t e m s u s e d by t e l e v i s i o n , w h i c h a r e t h e same as t h o s e i d e n t i f i e d by Salomon. The g e n e r a l a u d i o - v i s u a l c h a r a c t e r i s t i c s a l l o w i t t o p r e s e n t o r r e p r e s e n t k n o w l e d g e o r e x p e r i e n c e s i n a p a r t i c u l a r way. B a t e s has gone f u r t h e r t h a n Salomon and a c t u a l l y i d e n t i f i e d t e n c h a r a c t e r i s t i c s w i t h t h e i r r e l a t e d "modes o f r e p r e s e n t a t i o n " w h i c h he f e e l s have e d u c a t i o n a l i m p l i c a t i o n s . They a r e p r e s e n t e d i n T a b l e 1. T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 32 T a b l e 1 G e n e r a l C h a r a c t e r i s t i c s o f T e l e v i s i o n and Modes o f R e p r e s e n t a t i o n TV C h a r a c t e r i s t i c Modes o f R e p r e s e n t a t i o n C o n t i n u o u s a nd s e q u e n t i a l Movement, a n i m a t i o n , s l o w m o t i o n , r e p r e s e n t a t i o n o f ch a n g e s o v e r t i m e S p a t i a l R e p r e s e n t a t i o n o f s p a t i a l r e l a t i o n s h i p s ; ( c o m b i n e d w i t h camera movement: r e p r e s e n t a t i o n o f t h r e e d i m e n s i o n s ) ; p h y s i c a l m o d e l s ; g r a p h i c a l r e p r e s e n t a t i o n . V a r i a t i o n i n s i z e (zoom) M a g n i f i c a t i o n ; e x p l o r a t i o n o f d e t a i l ; a t t e n t i o n f o c u s s i n g . S t o r a g e a nd r e c o r d i n g R e c o r d i n g o f p e o p l e , p l a c e s a n d e v e n t s ; h i s t o r i c a l a r c h i v e s ; a c c e s s i n g new l e a r n i n g r e s o u r c e s ( p e o p l e , p l a c e s ) . E d i t i n g S e l e c t i o n ; r e o r d e r i n g ; r e s t r u c t u r i n g . D r a m a t i z a t i o n R e s t r u c t u r i n g o f e v e n t s ; r e p r e s e n t i n g human r e l a t i o n s h i p s Words; n o i s e s ; m u s i c - e m o t i v e a s p e c t s A m b i g u i t y S i m u l t a n e o u s v i e w i n g l i s t e n i n g ; f o c u s s i n g ; i n t e r p r e t a t i v e " L i v e " ( b r o a d c a s t TV o n l y ) Immediacy; news a n d c u r r e n t a f f a i r s ; s p o r t . N o t e : From Some u n i q u e c h a r a c t e r i s t i c s o f t e l e v i s i o n a n d some i m p l i c a t i o n s f o r t e a c h i n g a n d l e a r n i n g b y A.W. B a t e s , 1981a, Journal of Educational Television and Other Media, 8 ( 1 ) . The s y m b o l s y s t e m s , as d i s c u s s e d e a r l i e r , a r e d i g i t a l , a n a l o g i c , a n d i c o n i c . L i k e Salomon ( 1 9 7 6 ) , A u r a l S y m b o l i s m M u l t i - c h a n n e l T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 33 B a t e s s a y s t h e ma i n d i s t i n c t i o n b e t w e e n t e l e v i s i o n and o t h e r m e d i a i s i t s a b i l i t y t o combine a l l t h r e e s y m b o l i c s y s t e m s w h i c h makes i t a " r i c h " medium b e c a u s e " i t c a n c o n v e y m e a n i n g i n a w i d e v a r i e t y o f ways" ( B a t e s , 1981a, p. 15) . Summary & C o n c l u s i o n s The t h e o r e t i c a l l i t e r a t u r e s u g g e s t s t h a t t e l e v i s i o n has p o t e n t i a l t o f a c i l i t a t e l e a r n i n g , by a c t i v a t i n g o r s u p p l a n t i n g s p e c i f i c m e n t a l p r o c e s s e s , a nd b e c a u s e o f t h i s , l e a r n i n g f r o m t e l e v i s i o n w i l l v a r y w i t h t h e a b i l i t i e s o f t h e l e a r n e r . Salomon (1974, 1976, 1979) has p r o v i d e d t h e most c o m p r e h e n s i v e t h e o r y . He s u g g e s t s t h a t t h e s y m b o l i c code o f t h e medium i s what a f f e c t s l e a r n i n g . These c a n a c t i v a t e o r s u p p l a n t s p e c i f i c m e n t a l s k i l l s . F u r t h e r m o r e , t h e r e i s an i n t e r a c t i o n b e t w e e n t h e s e c o d e s , t h e c o n t e n t , t h e l e a r n i n g t a s k , a n d t h e a b i l i t i e s o f t h e l e a r n e r . E f f e c t i v e l e a r n i n g f r o m t e l e v i s i o n r e q u i r e s t h e m a t c h i n g o f t h e s y m b o l i c code t o t h e c r i t i c a l f e a t u r e s o f t h e l e a r n i n g t a s k a n d t h e a b i l i t i e s o f t h e l e a r n e r (Salomon, 1 9 7 9 ) . F o r O l s o n and B r u n e r ( 1 9 7 4 ) , m e n t a l s k i l l s a r e a l s o t h e c r i t i c a l a s p e c t o f l e a r n i n g f r o m t e l e v i s i o n a n d m e d i a i n g e n e r a l . They b e l i e v e c o n t e n t c a n be l e a r n e d e f f e c t i v e l y f r o m any medium, b u t t h e m e n t a l s k i l l s d e v e l o p e d w i l l v a r y f r o m medium t o medium. B a t e s (1981a) a t t e m p t s t o i n c o r p o r a t e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 34 t h e work o f b o t h Salomon and O l s o n and B r u n e r by p r o v i d i n g a b r o a d framework w i t h t h r e e g e n e r a l c h a r a c t e r i s t i c s t h a t a f f e c t l e a r n i n g f r o m t e l e v i s i o n ; d i s t r i b u t i o n a l a n d s o c i a l , c o n t r o l , and s y m b o l i c . Gagne ( c i t e d i n Schramm 1977a) s u g g e s t s t h e c r i t i c a l f e a t u r e o f l e a r n i n g f r o m t e l e v i s i o n i s t h e medium's a b i l i t y t o p r o v i d e c o n c r e t e e x a m p l e s o f a b s t r a c t o r c o m p l e x c o n c e p t s , i d e a s , and p r o c e s s e s , a n d B u r n s (1976) s u g g e s t s i t f a c i l i t a t e s l e a r n i n g t o t h e e x t e n t t h a t i t d e a l s w i t h c o n c e p t s o f m o t i o n , s i m u l t a n e o u s a c t i o n , and t h r e e - d i m e n s i o n a l c o n c e p t s . The o n l y a r e a o f d i s a g r e e m e n t i n t h e t h e o r y a p p e a r s t o be o v e r w h e t h e r some c o n t e n t c a n be t a u g h t more e f f e c t i v e l y b y some m e d i a t h a n o t h e r s . B a t e s (1981a) s a y s i t c a n ; O l s o n and B r u n e r (1974) d i s a g r e e . However, Salomon's (1976) p o s i t i o n t h a t b o t h c o n t e n t a nd s k i l l s d e p e n d on a n d i n t e r a c t w i t h t h e s y m b o l i c c o d e s o f t h e medium, t h e a b i l i t i e s o f t h e l e a r n e r a n d t h e l e a r n i n g a c t i v i t y seems t o p r o v i d e t h e most s e n s i b l e a n d c o m p r e h e n s i v e e x p l a n a t i o n o f l e a r n i n g f r o m t e l e v i s i o n . I f t h i s p o s i t i o n i s c o m b i n e d w i t h B a t e s ' c o n t r o l a n d d i s t r i b u t i o n a l a n d s o c i a l c h a r a c t e r i s t i c s o f t e l e v i s i o n a n d h i s d e t a i l e d " G e n e r a l C h a r a c t e r i s t i c s o f T e l e v i s i o n a n d Modes o f R e p r e s e n t a t i o n " ( T a b l e 1 ) , we have t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 35 b e g i n n i n g o f a w o r k a b l e t h e o r y . I t r e m a i n s t o be s e e n w h e t h e r i t c a n be s u p p o r t e d by e m p i r i c a l r e s e a r c h . R e s e a r c h R e s e a r c h P r o b l e m s I n t r o d u c t i o n . The l i t e r a t u r e r e v e a l s b o t h p r o b l e m s i n h e r e n t t o c o n d u c t i n g r e s e a r c h i n t h i s f i e l d a n d p r o b l e m s w i t h much o f t h e r e s e a r c h i t s e l f (Chacon-Duque, 1 9 8 5 ) . S e v e r a l r e v i e w s s e r i o u s l y q u e s t i o n t h e v a l u e o f much o f t h e c o m p a r a t i v e r e s e a r c h t h a t has been done i n d i s t a n c e e d u c a t i o n ( S t i c k e l l , 1963; B a r b a t s i s , 1978; R i c h a r d s o n , 1981; B a t e s , 1981b; P r o s s e r , 1984; S h a v e l s o n , Webb & H o t t a , 1 9 8 7 ) . I n h e r e n t p r o b l e m s . I n h i s monograph, Chacon-Duque (1985) i d e n t i f i e d t h e f o l l o w i n g i n h e r e n t p r o b l e m s w i t h c o n d u c t i n g r e s e a r c h i n d i s t a n c e e d u c a t i o n : 1. T h e r e a r e p r a c t i c a l l i m i t a t i o n s f o r t h e o b s e r v a t i o n o f s t u d e n t ' s r e s p o n s e s , a s t h e y o c c u r f a r away f r o m t h e i n s t i t u t i o n ; 2. The i n s t r u c t i o n a l c o n d i t i o n s a r e d i f f i c u l t t o a p p r a i s e , s i n c e a w i d e v a r i e t y o f s t r a t e g i e s and m e d i a a r e u s e d t o t e a c h a n d i n t e r - p e r s o n a l c o n t a c t s a r e r e s t r i c t e d ; 3. An homogeneous e n v i r o n m e n t l i k e t h e campus i s l a c k i n g , w h i c h adds c o m p l e x i t y t o t h e v a r i a b l e s i n v o l v e d i n t h e p r o c e s s (p. 2 ) . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 36 T h i s l i s t i s i n d i c a t i v e o f t h e d o m i n a t i o n o f t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m i n d i s t a n c e e d u c a t i o n r e s e a r c h , f o r t h e s e t h r e e i s s u e s a r e o n l y p r o b l e m s i f one i s c o n d u c t i n g t h i s t y p e o f r e s e a r c h . I t c o u l d be a r g u e d t h a t t h i s p r e o c c u p a t i o n w i t h e x p e r i m e n t a l a n d q u a s i - e x p e r i m e n t a l r e s e a r c h i s t h e most f u n d a m e n t a l p r o b l e m f a c i n g d i s t a n c e e d u c a t i o n r e s e a r c h (and p e r h a p s a l l e d u c a t i o n r e s e a r c h ) b e c a u s e a t t e m p t i n g t o p e r f e c t t h e e x p e r i m e n t a l method may be an u n a c h i e v a b l e g o a l . T h i s t y p e o f r e s e a r c h r e q u i r e s t h e c o n t r o l o f a l l v a r i a b l e s , random s a m p l e s and random a s s i g n m e n t o f s u b j e c t s t o t r e a t m e n t a n d c o n t r o l g r o u p s . T h i s may be d i f f i c u l t , i f n o t i m p o s s i b l e , t o a c h i e v e w h i l e m a i n t a i n i n g t h e c o n t e x t u a l r e a l i t y o f t h e e v e n t s o r b e h a v i o r s b e i n g o b s e r v e d . R e s e a r c h c o n d u c t e d i n t h e q u a l i t a t i v e p a r a d i g m , however, does n o t s e e k t o a r r a n g e c o n d i t i o n s t o s u i t t h e r e s e a r c h e r . I t does n o t n e c e s s a r i l y a t t e m p t t o r e j e c t a n u l l h y p o t h e s i s . I n s t e a d i t s e e k s t o c o n s t r u c t m e a n i n g f r o m t h e o b s e r v a t i o n o f n a t u r a l l y o c c u r r i n g b e h a v i o r s o r e v e n t s . C o n t r o l o f v a r i a b l e s , random a s s i g n m e n t , and e x t e r n a l and i n t e r n a l v a l i d i t y a r e n o t a s c r u c i a l . T h i s d o e s n o t mean t h a t " a n y t h i n g g o e s " . As d i s c u s s e d e a r l i e r , q u a l i t a t i v e r e s e a r c h has i t s own s e t o f r i g o r o u s c o n d i t i o n s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 37 M e t h o d o l o g i c a l p r o b l e m s . T h i s p r e d o m i n a n c e o f t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m a n d t h e i n h e r e n t p r o b l e m s t h i s c a r r i e s w i t h i t a r e a m a j o r r e a s o n f o r what a p p e a r s t o be a g e n e r a l l y u n i m p r e s s i v e body o f r e s e a r c h . The o v e r w h e l m i n g f i n d i n g o f s t u d i e s c o m p a r i n g t h e e f f e c t i v e n e s s i n t e r m s o f s t u d e n t a c h i e v e m e n t o f t e l e v i s i o n - b a s e d i n s t r u c t i o n w i t h t r a d i t i o n a l c l a s s r o o m i n s t r u c t i o n , f o r i n s t a n c e , has been t h a t t h e r e i s no s i g n i f i c a n t d i f f e r e n c e ( W i l k i n s o n , 1 9 8 0 ) . B u t t h e s e r e s u l t s a r e s u s p e c t b e c a u s e t h e m e t h o d o l o g y u s e d i n many o f t h e s e s t u d i e s has been c a l l e d i n t o q u e s t i o n . W i l k i n s o n i d e n t i f i e d t h e f o l l o w i n g d e f i c i e n c i e s : 1. I m p r e c i s e d e f i n i t i o n o f t e r m s 2. P o o r r e s e a r c h q u e s t i o n s 3. F a u l t y e x p e r i m e n t a l d e s i g n s 4. R e s e a r c h w h i c h t r a d e s o f f i n t e r n a l v a l i d i t y f o r e x t e r n a l v a l i d i t y . R i c h a r d s o n (1981) f o c u s e s on some f u n d a m e n t a l p r o b l e m s o f t h e newer t e c h n o l o g i e s : t h e i r g l a m o r o f t e n p r e v e n t s p e o p l e f r o m t h i n k i n g c l e a r l y a b o u t them. As C l a r k (1980b) p o i n t s o u t , one r e s u l t i s t h a t d e v e l o p e r s t o o r a r e l y d i s t i n g u i s h b e t w e e n t e c h n o l o g y a s a mode o f t r a n s m i s s i o n o f mes s a g e s , i n s t r u c t i o n a l o r o t h e r w i s e , a n d t e c h n o l o g y as a s e t o f s p e c i f i c t e c h n i q u e s e m p l o y e d i n t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 38 i n s t r u c t i o n a l a c t . T e c h n o l o g i e s o f t r a n s m i s s i o n r e f e r s t o t h o s e t e c h n o l o g i e s w h i c h t r a n s m i t m e s s a g e s . They a r e s i m p l y d e l i v e r y d e v i c e s w h i c h t r a n s m i t i n s t r u c t i o n a l p r o g r a m s , i n t h e same way t h a t a postman o r a c a r r i e r p i g e o n d e l i v e r s a l e t t e r . T e c h n o l o g i e s o f i n s t r u c t i o n , on t h e o t h e r h and, a r e t h e s e t o f r e s e a r c h - d e r i v e d p r i n c i p l e s f o r t h e d e s i g n o f i n s t r u c t i o n a l s t r a t e g i e s w h i c h make up t h e t e a c h i n g - l e a r n i n g p r o c e s s : s t r a t e g i e s s u c h a s c u e i n g t h e l e a r n e r s o t h a t h e / s h e a t t e n d s t o t h e a p p r o p r i a t e i n s t r u c t i o n a l t a s k , d e s i g n i n g t h e i n s t r u c t i o n a l message so t h a t i t a c t i v a t e s e x i s t i n g i n f o r m a t i o n - p r o c e s s i n g s k i l l s , r e i n f o r c i n g and p r o v i d i n g f e e d b a c k , o r b u i l d i n g a p p r o p r i a t e amounts o f n o v e l t y o r humor i n t o i n s t r u c t i o n ( p . 1 1 ) . T h i s s u p p o r t s Salomon's (197 6) c o n t e n t i o n t h a t t h e most i m p o r t a n t v a r i a b l e i n l e a r n i n g f r o m m e d i a i s n o t t h e t e c h n o l o g y i t s e l f , b u t t h e s y m b o l s y s t e m s , c o d e s and f o r m a t s u s e d i n t h e p r e s e n t a t i o n . Of t h e e x p e r i m e n t a l and q u a s i - e x p e r i m e n t a l s t u d i e s w h i c h a t t e m p t t o a s s e s s m e d i a e f f e c t i v e n e s s i n d i s t a n c e e d u c a t i o n , B a t e s (1981b) i d e n t i f i e s f o u r m a j o r d e f i c i e n c i e s : 1) i m p o r t a n t v a r i a b l e s were i g n o r e d s u c h as t h e q u a l i t y o f t h e m e d i a p r o d u c t i o n . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 39 2) o r g a n i z a t i o n a l and c o n t e x t u a l v a r i a b l e s were i g n o r e d s u c h as c l a s s s c h e d u l i n g o r v i e w i n g t i m e s 3) d i f f e r e n c e s b e t ween t h e q u a l i t y o f t r e a t m e n t and c o n t r o l c o n d i t i o n s were n o t a c c o u n t e d f o r , and 4) i n d i v i d u a l d i f f e r e n c e s i n r e s p o n s e s t o t e l e - and t r a d i t i o n a l c o u r s e s were n o t e x a m i n e d . The m e t h o d o l o g i c a l p r o b l e m s i d e n t i f i e d by b o t h B a t e s and W i l k i n s o n a r e t o a l a r g e e x t e n t o n l y p r o b l e m s f o r h y p o t h e t i c o - d e d u c t i v e e x p e r i m e n t a l r e s e a r c h . W i l k i n s o n ( 1 9 8 0 ) , l i k e Chacon-Duque (1985) i m p l i e s t h e a n s w e r l i e s i n e l i m i n a t i n g t h e s e p r o b l e m s . O n l y B a t e s (1981b) i n h i s c o n c e r n f o r t h e q u a l i t a t i v e a s p e c t s o f some v a r i a b l e s a n d t h e c o n t e x t i n v o l v e d comes c l o s e t o s u g g e s t i n g t h a t p e r h a p s t h e a p p r o a c h i t s e l f i s i n a p p r o p r i a t e . S h a v e l s o n , Webb & H o t t a (1987) go t h e n e x t s t e p and s t a t e t h a t t h e t r a d i t i o n a l r a n d o m i z e d e x p e r i m e n t i s n o t a p p r o p r i a t e f o r e v a l u a t i n g t e l e c o u r s e e f f e c t i v e n e s s , " T e l e c o u r s e p o p u l a t i o n s t y p i c a l l y d i f f e r f r o m t r a d i t i o n a l c o u r s e p o p u l a t i o n s ; t r e a t m e n t s v a r y a l m o s t a s much w i t h i n t e l e c o u r s e s a s b e t w e e n t e l e - a n d t r a d i t i o n a l c o u r s e s ; a n d a t t r i t i o n i s n o r m a l " (p. 2 7 ) . However, S h a v e l s o n e t a l . do n o t r e j e c t t h e h y p o t h e t i c o - d e d u c t i v e e x p e r i m e n t a l a p p r o a c h i t s e l f . I n s t e a d t h e y p r o p o s e s e v e r a l m o d i f i e d , q u a s i - e x p e r i m e n t a l d e s i g n s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 40 A more f u n d a m e n t a l c r i t i c i s m o f t h e r e s e a r c h has b e e n r a i s e d by B a r b a t s i s (1978) who q u e s t i o n s t h e a l m o s t t o t a l d o m i n ance o f t h e summative m o d e l . I n h e r r e v i e w o f i n s t r u c t i o n a l t e l e v i s i o n r e s e a r c h f r o m 1950 t o 1970 she f o u n d t h a t t h e summative r e s e a r c h f e l l i n t o f o u r c a t e g o r i e s : c o m p a r a t i v e e f f e c t i v e n e s s ; a n a l y z i n g s t u d i e s w h i c h e x a m i n e d v a r i a b l e s s u c h as t e a c h e r t r a i n i n g , o p p o r t u n i t y f o r f e e d b a c k , s e c o n d v i e w i n g a nd s o on; u t i l i z a t i o n s t u d i e s w h i c h compared one method o f u s i n g TV w i t h a n o t h e r ; and b a s i c s t u d i e s w h i c h l o o k e d a t t h e e f f e c t o f p r o d u c t i o n v a r i a b l e s on l e a r n i n g f r o m t e l e v i s i o n . I n r e v i e w i n g t h e s e s t u d i e s , B a r b a t s i s c o n c l u d e s " t h e r e i s a p r e p o n d e r a n c e o f i n c o n s i s t e n t a nd s t a t i s t i c a l l y n o n - s i g n i f i c a n t r e s u l t s " (p. 399) By c o n t r a s t t h e f o r m a t i v e r e s e a r c h done p r i m a r i l y by r e s e a r c h e r s a t t h e C h i l d r e n ' s T e l e v i s i o n Workshop p r o v i d e d "a p a t t e r n o f c o n s i s t e n t and s t a t i s t i c a l l y s i g n i f i c a n t r e s u l t s " (p. 4 0 3 ) . Whereas summative r e s e a r c h i s c o n c e r n e d w i t h e f f e c t s t h a t a r e h y p o t h e s i z e d a p r i o r i a n d depends on e m p i r i c a l and s t a t i s t i c a l p r o c e d u r e s t h a t p r o v i d e r e p l i c a t i o n , f o r m a t i v e r e s e a r c h i s o r i e n t e d t o w a r d s p r o v i d i n g i n f o r m a t i o n t o i m p r o v e p r o d u c t s o r p r a c t i c e s . Summative s t u d i e s a s k r e s e a r c h q u e s t i o n s i n an e i t h e r - o r manner. E i t h e r t h e h y p o t h e s i s i s r e j e c t e d o r a c c e p t e d . I n t h e f o r m a t i v e s t u d i e s , T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 41 i n s t e a d o f m a n i p u l a t i n g t h e c o n d i t i o n s t o r e p r e s e n t a h y p o t h e s i s , t h e r e s e a r c h q u e s t i o n i s p o s e d i n a c o n t e x t t h a t a c c e p t s t h e e x i s t i n g v a r i a b l e s and a t t e m p t s t o s i n g l e o u t t h o s e t h a t a r e r e l e v a n t t o t h e r e s e a r c h q u e s t i o n . E x t e r n a l v a l i d i t y i s n o t a c e n t r a l c o n c e r n b e c a u s e t h e f o r m a t i v e s t u d i e s a r e a i m e d a t i m p r o v i n g a p a r t i c u l a r p r o d u c t o r p r a c t i c e , n o t c o n t r i b u t i n g t o t h e b o dy o f k n o w l e d g e i n t h e s e n s e t h a t t r a d i t i o n a l a c a d e m i c r e s e a r c h i s . B a r b a t s i s c l a i m s t h a t t h e summative r e s e a r c h has f a i l e d t o p r o d u c e m e a n i n g f u l r e s u l t s . T h i s v i e w i s s u p p o r t e d by many p u b l i s h e d r e s e a r c h r e v i e w s ( S t i c k e l l , 1963; Chu & Schramm, 1968; Campeau, 1974, S m i t h , J . , 1983) However, what i s n o t as e v i d e n t i s h e r c l a i m t h a t t h e f o r m a t i v e a p p r o a c h u s e d by t h e r e s e a r c h e r s a t t h e C h i l d r e n ' s T e l e v i s i o n Workshop has p r o d u c e d m e a n i n g f u l r e s u l t s i n i n s t r u c t i o n a l t e l e v i s i o n r e s e a r c h : a p r i n c i p l e o f p r e s e n t a t i o n a l l e a r n i n g a l o n g w i t h a t e s t a b l e t h e o r y , and a r e s e a r c h m o d e l . The p r i n c i p l e o f p r e s e n t a t i o n a l l e a r n i n g s t a t e s t h a t g a i n s i n a c h i e v e m e n t a r e r e l a t e d t o e m p h a s i s i n p r o g r a m m i n g , manner o f p r e s e n t a t i o n , and e x t e n t t o w h i c h p r e s e n t a t i o n e l i c i t e d an o v e r t r e s p o n s e . The t e s t a b l e t h e o r y p o s t u l a t e s t h a t " t h e a c t i v i t y p r o d u c i n g p o t e n t i a l o f t h e medium i s t h e b a s i s f o r i t s i n s t r u c t i o n a l v a l u e " (p. 1 0 ) . The T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 42 m o d e l i n c l u d e s c a t e g o r i e s o f i n d e p e n d e n t v a r i a b l e s ( m a j o r p r o g r a m a t t r i b u t e s ) , d e p e n d e n t v a r i a b l e s ( v i e w e r o u t c o m e s ) , and p r i n c i p l e s o f p r o g r a m d e s i g n ( s t a t e m e n t s l i n k i n g s p e c i f i c i n d e p e n d e n t v a r i a b l e s and d e p e n d e n t v a r i a b l e s ) . The f a c t t h a t t h e s e a s p e c t s o f i n s t r u c t i o n a l t e l e v i s i o n have been s u p p o r t e d b y f o r m a t i v e r e s e a r c h i s r e a s s u r i n g , b u t t h e y a r e a l l e l e m e n t s t h a t c o u l d be s t u d i e d e x p e r i m e n t a l l y w i t h o u t t h e p r e l i m i n a r y f o r m a t i v e r e s e a r c h . The p r o b l e m w i t h r e s e a r c h t o d a t e has n o t b een a l a c k o f t e s t a b l e t h e o r i e s , p r i n c i p l e s o f l e a r n i n g o r r e s e a r c h m o d e l s . The p r o b l e m has b een t h e r e s e a r c h m e t h o d o l o g i e s e m p l o y e d and t h e q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e t h e y have assumed. The f o r m a t i v e a p p r o a c h s u g g e s t e d by B a r b a t s i s i s s i m i l a r i n m e t h o d o l o g y t o t h e q u a l i t a t i v e a p p r o a c h a d v o c a t e d by r e s e a r c h e r s o f t h e p h e n o m e n o g r a p h i c t r a d i t i o n ( D a h l g r e n , 1984; E n t w i s t l e , 1984; M a r t o n , 1 9 8 8 ) . B o t h a r e p h e n o m e n o l o g i c a l a p p r o a c h e s w h i c h r e l y on "a d i r e c t e x p l o r a t i o n o f t h e s t u d e n t s 1 e x p e r i e n c e s o f l e a r n i n g . " i n n a t u r a l l y o c c u r r i n g s i t u a t i o n s f o r t h e i r d a t a ( E n t w i s t l e , 1984, p. 1 3 ) . However, t h e r e a r e i m p o r t a n t p h i l o s o p h i c a l d i f f e r e n c e s b e t w e e n t h e f o r m a t i v e a p p r o a c h o f B a r b a t s i s and t h e q u a l i t a t i v e a p p r o a c h o f t h e p h e n o m e n o g r a p h i c r e s e a r c h e r s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 43 B a r b a t s i s ' a p p r o a c h does n o t r e j e c t t h e q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e . So w h i l e t h i s r e s e a r c h method i s r o o t e d i n phenomenology, i t s t i l l d o e s n o t a t t e m p t t o e x a m i n e q u a l i t a t i v e d i f f e r e n c e s i n l e a r n i n g . I n a d d i t i o n , t h i s r e s e a r c h model i s o n l y v i e w e d a s p r e p a r a t o r y t o e x p e r i m e n t a l r e s e a r c h . " F o r m a t i v e r e s e a r c h c a n be v i e w e d as a method o f i n q u i r y w h i c h i d e n t i f i e s t h e a p p r o p r i a t e h y p o t h e s e s t o be t e s t e d by summative r e s e a r c h " ( B a r b a t s i s , 1978, p. 4 1 2 ) . The q u a l i t a t i v e a p p r o a c h o f t h e p h e n o m e n o g r a p h i c t r a d i t i o n i s n o t o n l y p h e n o m e n o l o g i c a l i n n a t u r e , b u t i t assumes a q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e and i t i s n o t c o n s i d e r e d a p r e l i m i n a r y s t e p i n a l a r g e r e x p e r i m e n t a l a p p r o a c h . The f o r m a t i v e a p p r o a c h a d v o c a t e d by B a r b a t s i s i s a s t e p i n t h e r i g h t d i r e c t i o n . However, i f i t i s s i m p l y a p r e l i m i n a r y s t e p t o s t u d y i n g l e a r n i n g i n an e x p e r i m e n t a l s e t t i n g f r o m a q u a n t i t a t i v e p e r s p e c t i v e , i t i s n o t l i k e l y t o y i e l d r e s u l t s t h a t a r e any more m e a n i n g f u l t h a n what r e s e a r c h has a l r e a d y p r o v i d e d . Summary. I t i s c l e a r , t h e n , t h a t i n r e a d i n g a n d i n t e r p r e t i n g t h e d i s t a n c e e d u c a t i o n r e s e a r c h one has t o be c a u t i o u s . I t i s e a s y a nd t e m p t i n g t o make s w e e p i n g g e n e r a l i z a t i o n s a b o u t t h e e f f e c t i v e n e s s o f d i s t a n c e e d u c a t i o n a n d a b o u t c e r t a i n m e d i a components b a s e d on T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 44 t h e r e s e a r c h t h a t has b een c o n d u c t e d . B u t as t h e p r e c e d i n g c r i t i c i s m s r e v e a l , t h e r e a r e s e r i o u s m e t h o d o l o g i c a l w e a k n e s s e s i n much o f t h i s r e s e a r c h . I n d e e d , as B a r b a t s i s p o i n t s o u t , i t i s q u i t e p o s s i b l e t h a t r e s e a r c h e r s have b e e n t r y i n g t o a c h i e v e t h e i m p o s s i b l e by u s i n g a summative r e s e a r c h m o d el t o p r o d u c e m e a n i n g f u l r e s u l t s when c i r c u m s t a n c e s make c o n t r o l l e d e x p e r i m e n t a l s t u d i e s e x t r e m e l y d i f f i c u l t . C e r t a i n l y t h i s does n o t mean t h a t r e s e a r c h and t h e r e s u l t s t h a t have been p r o d u c e d t o d a t e c a n be d i s m i s s e d a s m e a n i n g l e s s . I t s i m p l y means t h e l i m i t a t i o n s o f t h e r e s e a r c h must be r e c o g n i z e d b e f o r e i t i s u s e d t o draw c o n c l u s i o n s and make d e c i s i o n s i n d i s t a n c e e d u c a t i o n p o l i c y a nd i n t e r m s o f f u t u r e r e s e a r c h . I t a l s o means t h a t r e s e a r c h e r s have t o be more c r e a t i v e i n how t h e y c o n c e p t u a l i z e t h e r e s e a r c h p r o b l e m s and more open m i n d e d a b o u t t h e m e t h o d o l o g i e s e m p l o y e d t o seek t h e a n s w e r s . A f t e r a l l , i f o v e r 30 y e a r s o f p r e d o m i n a n t l y q u a n t i t a t i v e , e x p e r i m e n t a l r e s e a r c h has p r o d u c e d s u c h meagre r e s u l t s , i t i s r e a s o n a b l e t o q u e s t i o n w h e t h e r t h e a p p r o a c h t a k e n i n t h e s e s t u d i e s i s a p p r o p r i a t e . E x p e r i m e n t a l R e s e a r c h I n t r o d u c t i o n . W i t h t h e p r e c e d i n g comments i n m i n d , i t i s a p p r o p r i a t e t o c o n t i n u e t h e l i t e r a t u r e r e v i e w by e x a m i n i n g t h e most p r o b l e m a t i c and l e a s t common t y p e o f T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 45 r e s e a r c h i n d i s t a n c e e d u c a t i o n - e x p e r i m e n t a l s t u d i e s . I n t h e i d e a l s c i e n t i f i c e x p e r i m e n t a l d e s i g n , s u b j e c t s a r e a s s i g n e d r a n d o m l y t o t r e a t m e n t and c o n t r o l g r o u p s and t h e e x p e r i m e n t e r m a n i p u l a t e s v a r i a b l e s a n d o b s e r v e s t h e i r e f f e c t s . The r e s e a r c h e r has c o m p l e t e c o n t r o l a n d s c h e d u l e s t r e a t m e n t s a n d measurements i n t h e most e f f i c i e n t way. By and l a r g e e d u c a t i o n a l r e s e a r c h h a s t r i e d t o a d o p t t h e e x p e r i m e n t a l method f r o m t h e p h y s i c a l s c i e n c e s w i t h few m o d i f i c a t i o n s ( F e t t e r m a n , 1 9 8 8 ) . B u t t h i s method i s e x t r e m e l y d i f f i c u l t t o employ i n t h e f i e l d o f d i s t a n c e e d u c a t i o n and i n s t r u c t i o n a l t e l e v i s i o n a n d when i t i s , t h e e x p e r i m e n t a l c o n d i t i o n s o f t e n e nd up c r e a t i n g an u n n a t u r a l l e a r n i n g s i t u a t i o n . B o t h q u a l i t a t i v e and some e x p e r i m e n t a l r e s e a r c h e r s have a r g u e d t h a t t h e r e i s v e r y l i t t l e u s e f o r t h e t r u e e x p e r i m e n t a l d e s i g n i n e d u c a t i o n ( B a n t o c k , 1961; P a r l e t t & H a m i l t o n , 1972; S h a v e l s o n e t a l . , 1 9 8 7 ) . I n g e n e r a l , f r o m t h e e x p e r i m e n t a l r e s e a r c h e r s p o i n t o f v i e w , t h e s t r e n g t h o f e x p e r i m e n t a l s t u d i e s i s i n t e r n a l a n d e x t e r n a l v a l i d i t y . B e c a u s e t h e v a r i a b l e s a r e c o n t r o l l e d , we c a n draw c o n c l u s i o n s a b o u t c a u s a l r e l a t i o n s h i p s a n d we c a n g e n e r a l i z e t h e r e s u l t s t o o t h e r g r o u p s w i t h a h i g h e r d e g r e e o f c o n f i d e n c e . However, what i s v i e w e d as a s t r e n g t h f r o m t h e e x p e r i m e n t a l p e r s p e c t i v e i s s e e n as a m a j o r weakness f r o m t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 46 q u a l i t a t i v e p e r s p e c t i v e . R e s e a r c h e r s who a r e l o o k i n g f o r q u a l i t a t i v e d i f f e r e n c e s i n l e a r n i n g a r g u e t h a t any e x p l a n a t i o n s o r t h e o r i e s o f l e a r n i n g must have " e c o l o g i c a l v a l i d i t y " ; t h a t i s t h e y must be " d e r i v e d f r o m t h e s e t t i n g s t o w h i c h t h e y a r e t o be a p p l i e d . O t h e r w i s e t h e r e c a n be l i t t l e c o n f i d e n c e p l a c e d i n t h e u t i l i t y o f t h e t h e o r y " ( E n t w i s t l e , 1984, p. 1 0 ) . Thus t h e random a s s i g n m e n t and s t r i c t c o n t r o l o f v a r i a b l e s w h i c h makes t h e e x p e r i m e n t a l s t u d y e x t e r n a l l y v a l i d a l s o c a n make i t e c o l o g i c a l l y i n v a l i d . Even q u a n t i t a t i v e , e x p e r i m e n t a l r e s e a r c h e r s a r e q u e s t i o n i n g t h e v a l u e o f t h e e x t e r n a l v a l i d i t y o f s u c h e x p e r i m e n t a l s t u d i e s . I n t h e i r s t u d y o f The New Literacy t e l e c o u r s e , S h a v e l s o n e t a l . (1986) f o u n d t h a t t h e i m p l e m e n t a t i o n o f t h e t e l e c o u r s e v a r i e d c o n s i d e r a b l y a c r o s s t h e f i v e s i t e s a t w h i c h i t was o f f e r e d . Thus t o impose random a s s i g n m e n t and s t r i c t c o n t r o l o f t r e a t m e n t c o n d i t i o n s "may v e r y w e l l d i s t o r t t h i s ' n a t u r a l ' phenomenon and d r a s t i c a l l y l i m i t t h e g e n e r a l i z a b i l i t y o f t h e e v a l u a t i o n f i n d i n g s " ( S h a v e l s o n , Webb & H o t t a , 1987, p. 3 2 ) . I n e f f e c t t h e s e e x p e r i m e n t a l s t u d i e s c a n o n l y be g e n e r a l i z e d t o o t h e r g r o u p s f r o m t h e same p o p u l a t i o n u n d e r t h e same c o n d i t i o n s b u t b e c a u s e t h e c o n d i t i o n s a r e o f t e n so a r t i f i c i a l , i n p r a c t i c e t h i s means v e r y l i t t l e . The T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 47 e x p e r i m e n t a l s t u d i e s must t h e n be e x a m i n e d w i t h t h e s e s p e c i f i c c a u t i o n s i n m i n d . L i v e v s . v i d e o i n a t r a d i t i o n a l s e t t i n g . S u l l i v a n e t a l . (1979) were a c u t e l y aware o f t h e i n a d e q u a c y o f e x p e r i m e n t a l r e s e a r c h i n d i s t a n c e e d u c a t i o n when t h e y c o n d u c t e d t h e i r c o m p a r i s o n o f f o u r methods o f i n s t r u c t i o n : l i v e l e c t u r e , l i v e v i d e o t a p e , s t u d i o - p r o d u c e d v i d e o t a p e , and v i d e o t a p e o f l i v e l e c t u r e . T h i s s t u d y a t t e m p t e d t o r e c t i f y two o f t h e d e f i c i e n c i e s t h a t t h e y i d e n t i f i e d w i t h p r e v i o u s e x p e r i m e n t a l r e s e a r c h : i n a b i l i t y t o c o n t r o l s t u d e n t l e a r n i n g o u t s i d e o f l e c t u r e ( t r e a t m e n t ) c o n d i t i o n s ; and l a c k o f p r e c i s i o n i n m e a s u r i n g t h e d e p e n d e n t v a r i a b l e - s t u d e n t l e a r n i n g . T h r e e h u n d r e d a nd t h i r t y e i g h t f i r s t y e a r P s y c h o l o g y s t u d e n t s were r a n d o m l y a s s i g n e d t o e a c h o f t h e f o u r e x p e r i m e n t a l g r o u p s . E a c h g r o u p was g i v e n a p r e - t e s t , a n d p o s t - t e s t , a r e t e n t i o n t e s t ( p a r a l l e l t o t h e p o s t - t e s t ) a n d an a t t i t u d e s u r v e y u s i n g s e m a n t i c d i f f e r e n t i a l s c a l e s . The t r e a t m e n t c o n s i s t e d o f one l e c t u r e on t h e t o p i c o f c o g n i t i v e d i s s o n a n c e g i v e n a c c o r d i n g t o one o f t h e f o u r m ethods: 1. L i v e l e c t u r e . 2. L i v e v i d e o t a p e . T h i s i s t h e same as t h e l i v e l e c t u r e e x c e p t t h e p r o d u c t i o n crew was p r e s e n t . I n o t h e r words t h i s c o n s i s t e d o f t h e g r o u p o f s t u d e n t s who T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 48 a t t e n d e d t h e l i v e l e c t u r e w h i c h was b e i n g v i d e o t a p e d f o r use b y t h e " v i d e o t a p e o f t h e l i v e l e c t u r e " g r o u p . 3. V i d e o t a p e o f t h e l i v e l e c t u r e . 4. S t u d i o - p r o d u c e d v i d e o t a p e w h i c h i n c o r p o r a t e d more v i s u a l m a t e r i a l s u c h as s l i d e s and f i l m c l i p s . The same i n s t r u c t o r and t h e same s c r i p t was u s e d f o r a l l g r o u p s . The r e s u l t s i n d i c a t e d t h a t t h e r e was no s i g n i f i c a n t d i f f e r e n c e i n t e r m s o f s t u d e n t a c h i e v e m e n t b e t w e e n t h e f o u r g r o u p s , b u t when t h e two l i v e c o n d i t i o n s were c o m b i n e d a nd compared t o t h e two v i d e o t a p e d c o n d i t i o n s , t h e s t u d e n t s i n t h e l i v e c o n d i t i o n s s c o r e d s i g n i f i c a n t l y h i g h e r . S t u d e n t a t t i t u d e s t o w a r d s t h e i n s t r u c t o r were m e a s u r e d on t h r e e d i m e n s i o n s : g e n e r a l e v a l u a t i o n , i n t e g r i t y , and i n t e n s i t y . The r e s u l t s i n d i c a t e d t h a t i n t h e l i v e c o n d i t i o n s t h e i n s t r u c t o r was r a t e d h i g h e r i n t e r m s o f g e n e r a l e v a l u a t i o n , b u t t h e r e was no d i f f e r e n c e on t h e o t h e r two d i m e n s i o n s . S u l l i v a n e t a l . (1979) c o n c l u d e d t h a t t h e i r r e s u l t s were i m p r e s s i v e b e c a u s e t h e y h ad u s e d s u c h a t i g h t l y c o n t r o l l e d e x p e r i m e n t . However, t h e y a d m i t , a l b e i t i m p l i c i t l y , t h a t e x t e r n a l v a l i d i t y may be i n q u e s t i o n when t h e y s p e c i f i e d t h e f o l l o w i n g c o n d i t i o n s f o r t h e i r t y p e o f s t u d i e s : t h e s u b j e c t m a t t e r must be n o v e l b u t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 49 i n t e r e s t i n g ; i t s a c h i e v e m e n t must be a b l e t o be m e a s u r e d p r e c i s e l y ( p r e s u m a b l y t h i s w o u l d n o t a l l o w f o r q u a l i t a t i v e d i f f e r e n c e s ) ; t h e s u b j e c t s ' i n i t i a l l e v e l o f p r i o r k n o w l e d g e must be l o w ; and t h e e x p e r i m e n t a l d e s i g n must p e r m i t b o t h t e a c h i n g and t e s t i n g d u r i n g t h e one c l a s s p e r i o d . C l e a r l y , t h e s e t y p e s o f c o n d i t i o n s a r e n o t n o r m a l l y f o u n d i n e i t h e r c l a s s r o o m o r d i s t a n c e e d u c a t i o n c o n t e x t s . L e a r n i n g i s n o t s o m e t h i n g t h a t b e g i n s and ends i n one c l a s s p e r i o d , n o t a l l s u b j e c t s a r e n o v e l and i n t e r e s t i n g t o a l l s t u d e n t s , s t u d e n t s b a c k g r o u n d k n o w l e d g e o f any s u b j e c t w i l l v a r y c o n s i d e r a b l y , and t h e q u a l i t a t i v e r e s e a r c h e r w o u l d a r g u e t h a t k n o w l e d g e c a n n o t be m e a s u r e d p r e c i s e l y ( D a h l g r e n , 1984, p. 2 4 ) . F u r t h e r m o r e , t h e e c o l o g i c a l v a l i d i t y o f t h i s s t u d y has been t o t a l l y i g n o r e d . The use o f a p a r t i c u l a r method o f p r e s e n t a t i o n i s s o m e t h i n g t h a t s t u d e n t s may have t o g e t u s e d t o . The l e c t u r e i s a f a m i l i a r f o r m a t , b u t , f o r many, v i d e o t a p e s a r e n o t . I t may t a k e t i m e f o r s t u d e n t s t o g e t c o m f o r t a b l e w i t h v i d e o t a p e d i n s t r u c t i o n and t o become f a m i l i a r w i t h i t s p a r t i c u l a r i n s t r u c t i o n a l q u a l i t i e s . U n l e s s s t u d e n t s w i l l f a c e random a s s i g n m e n t t o a p a r t i c u l a r method o f i n s t r u c t i o n i n t h e r e a l w o r l d , t h e n i m p o s i n g i t on them i n a e x p e r i m e n t a l s i t u a t i o n i s u n n a t u r a l and c o u l d t h e r e f o r e have an e f f e c t on t h e s t u d e n t s ' a c h i e v e m e n t . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 50 I n s t r u c t o r c o n t a c t . H u l t (1980) c o n d u c t e d a s i m i l a r , a l t h o u g h l e s s r i g o r o u s , s t u d y w h i c h i n c l u d e d an a d d i t i o n a l v a r i a b l e , i n s t r u c t o r c o n t a c t . T h r e e d i f f e r e n t t r e a t m e n t s were u s e d : l i v e i n s t r u c t i o n , v i d e o t a p e d i n s t r u c t i o n w i t h no i n s t r u c t o r c o n t a c t , and v i d e o t a p e d i n s t r u c t i o n w i t h i n s t r u c t o r c o n t a c t . I n t e r m s o f s t u d e n t a c h i e v e m e n t , t h e r e s u l t s i n d i c a t e d t h e r e was no s i g n i f i c a n t d i f f e r e n c e among t h e t h r e e g r o u p s , b u t i n t e r m s o f s t u d e n t a t t i t u d e s t h e g r o u p t h a t d i d n o t r e c e i v e i n s t r u c t o r c o n t a c t e x p r e s s e d s i g n i f i c a n t l y more n e g a t i v e a t t i t u d e s t o w a r d s t h e c o u r s e t h a n t h e two g r o u p s w h i c h h a d i n s t r u c t o r c o n t a c t . H u l t s u g g e s t s t h a t t h i s f i n d i n g i n d i c a t e s t h a t t e l e v i s i o n o r v i d e o t a p e d i n s t r u c t i o n a t t h e c o l l e g e l e v e l s h o u l d be c o m b i n e d w i t h some i n s t r u c t o r c o n t a c t so t h a t s t u d e n t s c a n b e n e f i t f r o m t h e h i g h d e g r e e o f s t r u c t u r e and o r g a n i z a t i o n o f i n s t r u c t i o n a l t e l e v i s i o n c o u r s e s b u t a l s o r e t a i n t h e o p p o r t u n i t y f o r i n t e r a c t i o n a n d i m m e d i a t e f e e d b a c k w i t h an i n s t r u c t o r . H u l t ' s (1980) s t u d y was n o t as r i g o r o u s as t h a t o f S u l l i v a n ( 1 9 7 9 ) . I t i s n o t c l e a r i f random a s s i g n m e n t was u s e d a n d l e a r n i n g o u t s i d e t h e t r e a t m e n t s i t u a t i o n was n o t c o n t r o l l e d . However, i t s a d v a n t a g e o v e r t h e s t u d y o f S u l l i v a n e t a l . i s t h a t i t u s e d a c o m p l e t e c o u r s e as t h e u n i t o f c o m p a r i s o n . So w h i l e i t be may be T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 51 c r i t i c i z e d f r o m an e x p e r i m e n t a l p e r s p e c t i v e b e c a u s e o f i t s l a c k o f i n t e r n a l v a l i d i t y , t h i s s t u d y has more m e a n i n g f o r t h e q u a l i t a t i v e r e s e a r c h e r b e c a u s e t h e e x p e r i m e n t a l s i t u a t i o n was k e p t as " n a t u r a l " a s p o s s i b l e by u s i n g a c o m p l e t e c o u r s e . T h i s meant s t u d e n t s were a b l e t o become f a m i l i a r w i t h t h e i r p a r t i c u l a r mode o f i n s t r u c t i o n , t h u s m a k i n g t h e r e s u l t s more g e n e r a l i z a b l e t o o t h e r s i m i l a r s i t u a t i o n s . T e l e v i s i o n / v i d e o f o r m a t v a r i a b l e s . The o t h e r a s p e c t o f t e l e v i s e d i n s t r u c t i o n t h a t has been e x a m i n e d e x p e r i m e n t a l l y i s t h e e f f e c t o f d i f f e r e n t p r e s e n t a t i o n v a r i a b l e s w i t h i n a v i d e o o r t e l e v i s i o n t r e a t m e n t . A r e s t u d e n t a c h i e v e m e n t and a t t i t u d e s a f f e c t e d by d i f f e r e n t t e l e v i s i o n f o r m a t s , d i f f e r e n t t y p e s o f p r e s e n t e r s a n d i s t h e r e any i n t e r a c t i o n b e t ween t h e s e v a r i a b l e s and c h a r a c t e r i s t i c s o f t h e l e a r n e r ? Brown, Brown & D a n i e l s o n (1975) c o n d u c t e d one s u c h e x p e r i m e n t a l s t u d y i n an a t t e m p t t o a nswer t h e s e q u e s t i o n s . They e x a m i n e d i n s t r u c t i o n a l t r e a t m e n t v a r i a b l e s ; t h a t i s , d i f f e r e n c e s i n how t h e c o n t e n t was p r e s e n t e d , d i f f e r e n c e s i n p r e s e n t e r t y p e s , and s u c h d i f f e r e n c e s i n l e a r n e r c h a r a c t e r i s t i c s a s age and r e a d i n g a b i l i t y as f a c t o r s w h i c h m i g h t p o t e n t i a l l y a f f e c t s t u d e n t a c h i e v e m e n t and a t t i t u d e s . The s u b j e c t s i n t h i s e x p e r i m e n t were shown t h r e e 6 t o 8 m i n u t e t e l e v i s i o n segments f o c u s s i n g on T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 52 t h r e e d i s t i n c t t o p i c s i n a c c o u n t i n g . . The t h r e e t e l e v i s i o n segments were v a r i e d a l o n g t h r e e p r e s e n t a t i o n d i m e n s i o n s : 1. L e a r n e r i n v o l v e m e n t - a c t i v e / p a s s i v e 2. P r e s e n t e r i n v o l v e m e n t - a p a r t o f and a p a r t f r o m . 3. D i r e c t i o n t o t h e l e a r n e r - c u e d and n o t c u e d . W i t h i n e a c h p r e s e n t a t i o n t y p e , t h r e e d i f f e r e n t p r e s e n t e r t y p e s were u s e d . The p r e s e n t e r s v a r i e d a c c o r d i n g t o t h e i r s e x , age and s t y l e o f p r e s e n t a t i o n . Some were d e s i g n e d t o a p p e a r l i k e p r o f e s s i o n a l a c t o r s , o t h e r s were meant t o be more l i k e i n s t r u c t o r s , b u t v a r i e d a c c o r d i n g t o t h e i r l e v e l o f s e r i o u s n e s s . Some u s e d humor, o t h e r s were much more f o r m a l and b u s i n e s s l i k e . W i t h s u c h a c o m p l e x c o m b i n a t i o n o f f a c t o r s , i t i s n o t s u r p r i s i n g t h a t t h e r e s u l t s a r e somewhat a m b i g u o u s . U n f o r t u n a t e l y , i t i s n o t c l e a r i f t h e a p p r o p r i a t e a n a l y s e s were p e r f o r m e d g i v e n t h e many f a c t o r s i n v o l v e d . I n t e r m s o f t h e t h r e e t y p e s o f p r e s e n t a t i o n v a r i a b l e s , l e a r n e r i n v o l v e m e n t , p r e s e n t e r i n v o l v e m e n t , a nd d i r e c t i o n s t o t h e ' l e a r n e r , o n l y t h e p r e s e n t e r i n v o l v e m e n t r e v e a l e d s i g n i f i c a n t d i f f e r e n c e s . I n t h i s c a s e , s t u d e n t a c h i e v e m e n t was s i g n i f i c a n t l y h i g h e r when t h e p r e s e n t e r was a p a r t o f t h e p r e s e n t a t i o n . I n o t h e r w o r d s , t h e s t u d e n t s p e r f o r m e d b e t t e r when t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 53 p r e s e n t e r / i n s t r u c t o r was a c t u a l l y an a c t o r i n an i n s t r u c t i o n a l v i g n e t t e r a t h e r t h a n a t h i r d p a r t y d e s c r i b i n g t h e v i g n e t t e . The o t h e r two p r e s e n t a t i o n v a r i a b l e s p r o d u c e d no s i g n i f i c a n t d i f f e r e n c e s i n e i t h e r a c h i e v e m e n t o r a t t i t u d e s . B e c a u s e t h e p r e s e n t e r t y p e s were n o t t h e same f o r e a c h p r e s e n t a t i o n t y p e , t h e r e s u l t s a r e somewhat c o n f o u n d e d . However, Brown e t a l . (1975) do draw t h r e e g e n e r a l c o n c l u s i o n s i n t h i s r e g a r d . The f i r s t two a r e n o t p a r t i c u l a r l y r e v e a l i n g . F i r s t o f a l l t h e y c o n c l u d e t h a t a d u l t l e a r n e r s a r e more r e s p o n s i v e t o an e n t h u s i a s t i c p r e s e n t a t i o n ; i t i s i m p o r t a n t t h a t t h e p r e s e n t e r s a p p e a r i n t e r e s t e d i n a n d k n o w l e d g e a b l e a b o u t t h e s u b j e c t m a t t e r : "A b l a n d p r e s e n t a t i o n o r one marked by a p p a r e n t c o n f u s i o n y i e l d s n e g a t i v e a t t i t u d i n a l r e s p o n s e s and can a f f e c t a c h i e v e m e n t . A f r i e n d l y , s e l f - a s s u r e d and c o n f i d e n t p o r t r a y a l i s more p o s i t i v e l y r e c e i v e d by t h e a d u l t l e a r n e r " (p. 4 0 2 ) . I t i s a l s o i m p o r t a n t t h a t t h e p r e s e n t e r n o t s u g g e s t t h a t t h e m a t e r i a l i s d i f f i c u l t e i t h e r f o r t h e l e a r n e r o r t h e p r e s e n t e r . B u t p e r h a p s t h e most s i g n i f i c a n t c o n c l u s i o n drawn by t h e r e s e a r c h e r s was t h e i m p o r t a n c e o f c o n t e x t t o t h e w h o l e q u e s t i o n o f t h e e f f e c t o f p r e s e n t e r t y p e s . I n one c a s e t h e same a c t o r r e c e i v e d t h e l o w e s t r a t i n g f r o m one g r o u p o f s t u d e n t s w h i l e r e c e i v i n g t h e h i g h e s t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 54 i n a n o t h e r . I t w o u l d a p p e a r t h i s was due t o t h e f a c t t h a t t h e t y p e o f p r e s e n t a t i o n v a r i e d . "As one i n t e r v i e w e e n o t e d , 'he f i t t h e p a r t ' i n t h e segment i n w h i c h he r e c e i v e d t h e p o s i t i v e r a t i n g s . Thus t h e o v e r r i d i n g message f r o m t h i s s t u d y w i t h r e g a r d t o p r e s e n t e r t y p e i s t h e n e e d f o r c r e d i b i l i t y . R e s p o n s e s t o o t h e r p r e s e n t e r v a r i a b l e s , s u c h as s e x o r a t t r a c t i v e n e s s , a r e c a l l e d i n t o q u e s t i o n b e c a u s e o f t h e u n i q u e n e s s o f t h e e x p e r i m e n t a l c o n d i t i o n . Brown e t a l . were aware o f t h e l i m i t a t i o n s o f t h e i r s t u d y a s t h e y c a u t i o n e d , " t h a t t h e s e r e s u l t s were o b t a i n e d f r o m a d u l t s s e e i n g v e r y s h o r t segments i n a o n e - e x p o s u r e s i t u a t i o n . W h e t her t h e r e s u l t s g e n e r a l i z e t o a l o n g e r l e a r n i n g e x p o s u r e s e t t i n g o r t o a s e r i e s o f p r o g r a m s i s u n d e t e r m i n e d " (p. 4 0 2 ) . The i n t e r a c t i o n o f l e a r n e r c h a r a c t e r i s t i c s w i t h t h e d i f f e r e n t p r e s e n t e r and p r e s e n t a t i o n t y p e s i s l e s s r e v e a l i n g . Not s u r p r i s i n g l y , age, e d u c a t i o n a l l e v e l a n d r e a d i n g a b i l i t y a r e r e l a t e d t o s t u d e n t a c h i e v e m e n t l e v e l s a f t e r h a v i n g w a t c h e d t h e s h o r t s e g m e n t s . I t i s w o r t h n o t i n g , however, t h a t t h e r e s u l t s i n d i c a t e d t h a t o l d e r p e o p l e and t h o s e weak i n r e a d i n g a b i l i t y were more l i k e l y t o c o m p l a i n a b o u t t h e p a c e o f t h e p r o g r a m s . They p r e f e r r e d a s l o w e r p a c e w i t h more r e d u n d a n c y b u i l t i n t o t h e p r o g r a m s . Here t o o , however, t h e c o n t e x t must be T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 55 t a k e n i n t o a c c o u n t . These r e s u l t s a r e b a s e d on 6 t o 8 m i n u t e t e l e v i s i o n s e g m e n t s . I t i s g u i t e p o s s i b l e t h a t , o v e r a l o n g e r t e r m , m o t i v a t i o n and p e r s i s t e n c e o f t h e o l d e r l e a r n e r m i g h t o u t w e i g h t h e d i s a d v a n t a g e t h a t t h e i r age a p p e a r s t o p l a y i n t h e s h o r t t e r m . T h i s i s t h e c l e a r e s t e x ample o f t h e d i s t i n c t i o n b e t w e e n t h e q u a n t i t a t i v e and q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e a n d t h e c l e a r e s t e x ample o f e x p e r i m e n t a l r i g o r l i m i t i n g t h e e c o l o g i c a l v a l i d i t y o f a s t u d y . L e a r n i n g d o e s n o t n o r m a l l y o c c u r i n s i x t o e i g h t m i n u t e segments a n d w h i l e d e t a i l s o f t h e a s s e s s m e n t p r o c e d u r e s a r e n o t g i v e n , i t i s c l e a r t h a t t h e q u a l i t y o f s t u d e n t r e s p o n s e s was n o t e x a m i n e d . Even s t u d e n t a t t i t u d e s were a s s e s s e d q u a n t i t a t i v e l y u s i n g L i k e r t s c a l e q u e s t i o n n a i r e s . Brown e t a l . a r e aware o f some o f t h e s h o r t c o m i n g s o f t h e i r s t u d y b e c a u s e t h e y c o n c l u d e by s u g g e s t i n g t h a t t h e i r s t u d y be r e p l i c a t e d i n t h e c o n t e x t o f a c o m p l e t e c o l l e g e t e l e c o u r s e p r o g r a m . Summary. The e x p e r i m e n t a l r e s e a r c h i s l i m i t e d b o t h i n q u a n t i t y and i n q u a l i t y . I t w o u l d a p p e a r f r o m t h e s t u d i e s r e v i e w e d h e r e t h a t t h e r e i s r e a s o n t o b e l i e v e t h a t f a c e t o f a c e i n s t r u c t i o n may be more e f f e c t i v e , i n t e r m s o f s t u d e n t a c h i e v e m e n t , t h a n v i d e o t a p e d i n s t r u c t i o n . A n o t h e r s t u d y c o n c l u d e s t h a t a c e r t a i n d e g r e e o f i n s t r u c t o r c o n t a c t c o m b i n e d w i t h v i d e o t a p e d T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 56 i n s t r u c t i o n m i g h t p r o v i d e an e f f e c t i v e a l t e r n a t i v e t o f a c e t o f a c e i n s t r u c t i o n . F i n a l l y , i n t e r m s o f p r e s e n t a t i o n v a r i a b l e s , r e s e a r c h e r s have f o u n d t h a t p e r c e i v e d c r e d i b i l i t y o f t h e p r e s e n t e r i n v i d e o t a p e d i n s t r u c t i o n i s c r u c i a l t o s t u d e n t l e a r n i n g and v i d e o t a p e d segments i n w h i c h t h e p r e s e n t e r i s an a c t i v e p a r t i c i p a n t r a t h e r t h a n an o b j e c t i v e h o s t a r e more e f f e c t i v e . A l l o f t h e s e c o n c l u s i o n s must be v i e w e d w i t h c a u t i o n g i v e n t h e way i n w h i c h t h e r e s e a r c h has been c o n d u c t e d . None o f t h e s t u d i e s r e v i e w e d a t t e m p t e d t o p r o b e p o s s i b l e q u a l i t a t i v e d i f f e r e n c e s i n l e a r n i n g t h a t m i g h t r e s u l t f r o m u s i n g d i f f e r e n t m e d i a f o r i n s t r u c t i o n . S t u d e n t a t t i t u d e s were a l s o a p p r o a c h e d f r o m a q u a n t i t a t i v e p e r s p e c t i v e . The e x p e r i m e n t a l s i t u a t i o n s were o f t e n u n n a t u r a l and u n r e p r e s e n t a t i v e o f r e a l l e a r n i n g s i t u a t i o n s and t h e random a s s i g n m e n t o f s u b j e c t s may h ave meant t h a t s t u d e n t s were f o r c e d i n t o t r e a t m e n t s t h e y w o u l d n o t n o r m a l l y c h o o s e . Even i f t h e s t u d i e s a r e l o o k e d a t s t r i c t l y f r o m an e x p e r i m e n t a l p e r s p e c t i v e , t h e r e a r e s t i l l s e r i o u s s h o r t c o m i n g s b e c a u s e p r o p e r c o n t r o l o f e x t r a n e o u s v a r i a b l e s was o f t e n a b s e n t o r n o t a p p a r e n t . I n b r i e f , v e r y l i t t l e c a n be l e a r n e d f r o m s u c h s t u d i e s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 57 Q u a s i E x p e r i m e n t a l R e s e a r c h I n t r o d u c t i o n . P r o b l e m s i n h e r e n t i n c o n d u c t i n g r e s e a r c h i n t h e f i e l d o f d i s t a n c e e d u c a t i o n and i n s t r u c t i o n a l t e l e v i s i o n h ave a l r e a d y b een d i s c u s s e d . I n v i e w o f t h e s e p r o b l e m s , i t i s n o t s u r p r i s i n g t h a t t h e r e i s v e r y l i t t l e e x p e r i m e n t a l r e s e a r c h i n t h e f i e l d . I n s t e a d r e s e a r c h e r s h ave c o n c e n t r a t e d t h e i r e f f o r t s on q u a s i - e x p e r i m e n t a l s t u d i e s . These a r e s t u d i e s i n w h i c h t h e e x p e r i m e n t e r does n o t have c o m p l e t e c o n t r o l o v e r t h e e x p e r i m e n t a l e n v i r o n m e n t ( C a m p b e l l & S t a n l e y , 1 9 6 3 ) . I t means, f o r i n s t a n c e , t h a t t h e l e a r n i n g s i t u a t i o n o r t a s k c a n n o t be c o m p l e t e l y m a n i p u l a t e d t o s u i t t h e e x p e r i m e n t e r . The e x p e r i m e n t e r i s t h u s f o r c e d t o a c c e p t a more n a t u r a l l e a r n i n g s i t u a t i o n . W h i l e t h e r e s u l t s o f t h e q u a s i - e x p e r i m e n t a l s t u d i e s a r e c e r t a i n l y more numerous, t h e l a c k o f e x p e r i m e n t a l c o n t r o l o f t e n r a i s e s s e r i o u s q u e s t i o n s a b o u t t h e i r i n t e r n a l v a l i d i t y . On t h e o t h e r hand, t h e f a c t t h a t t h e s t u d i e s have been c o n d u c t e d i n n a t u r a l s e t t i n g s makes them a p p l i c a b l e t o more t h a n j u s t t h e e x p e r i m e n t a l c o n d i t i o n . T e l e c o u r s e - f a c e t o f a c e c o m p a r i s o n . The most p r e v a l e n t t y p e o f q u a s i - e x p e r i m e n t a l r e s e a r c h i n t h i s f i e l d a p p e a r s t o be t h a t w h i c h a t t e m p t s t o compare t h e e f f e c t i v e n e s s , i n t e r m s o f s t u d e n t a c h i e v e m e n t , o f c o m p l e t e t e l e c o u r s e s w i t h e q u i v a l e n t on-campus c o u r s e s . The d e g r e e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 58 o f q u a n t i t a t i v e e x p e r i m e n t a l r i g o r v a r i e s c o n s i d e r a b l y . Some s t u d i e s a r e m e r e l y t a b u l a t i o n s o f s t u d e n t marks w i t h v i r t u a l l y no s t a t i s t i c a l t e s t s o f s i g n i f i c a n c e a p p l i e d , w h i l e o t h e r s come much c l o s e r t o a t r u e c o n t r o l l e d e x p e r i m e n t . None a t t e m p t t o examine a n d / o r compare t h e q u a l i t y o f l e a r n i n g i n t h e two s i t u a t i o n s . Mount a n d W a l t e r s (1983) made a d i r e c t c o m p a r i s o n b e t w e e n an on-campus i n t r o d u c t o r y p s y c h o l o g y c o u r s e a n d t h e t e l e c o u r s e v e r s i o n o f t h e same c o u r s e . I n a d d i t i o n t o s t u d e n t a c h i e v e m e n t t h e y e x a m i n e d s t u d e n t a t t i t u d e s a n d p e r s o n a l i t y c h a r a c t e r i s t i c s . The same i n s t r u c t o r was u s e d f o r b o t h v e r s i o n s o f t h e c o u r s e a n d t h e same i n s t r u m e n t s were a d m i n i s t e r e d t o b o t h g r o u p s . To measure a c h i e v e m e n t , t h e s t u d e n t s i n b o t h g r o u p s were g i v e n t h r e e 4 0 - q u e s t i o n t e s t s . The r e s u l t s i n d i c a t e a s i g n i f i c a n t d i f f e r e n c e i n f a v o r o f t h e t e l e v i s i o n g r o u p . A one-way ANCOVA was p e r f o r m e d w i t h age as t h e c o v a r i a t e a n d t e s t s c o r e as t h e c r i t e r i o n . The a d j u s t e d means were s t i l l s i g n i f i c a n t l y d i f f e r e n t , a l t h o u g h t h e s p r e a d was n o t as g r e a t . The s t u d y a l s o r e v e a l e d a s i g n i f i c a n t l y h i g h e r d r o p o u t r a t e i n t h e t e l e c o u r s e g r o u p w h i c h may have h ad an e f f e c t on t h e g r o u p mean a c h i e v e m e n t s c o r e b e c a u s e some o f t h e weaker s t u d e n t s may have d r o p p e d o u t . The p e r s o n a l i t y t e s t s a l s o T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 59 r e v e a l e d s i g n i f i c a n t d i f f e r e n c e s w i t h t h e t e l e c o u r s e g r o u p b e i n g c l a s s e d as more " h a p p y - g o - l u c k y " , c o n s c i e n t i o u s , t r u s t i n g , a s t u t e , c o n t r o l l e d a n d l e s s a p p r e h e n s i v e . I t a p p e a r s t h a t a l o t o f e f f o r t was w a s t e d by n o t a s k i n g a somewhat o b v i o u s g u e s t i o n : Do i n i t i a l a b i l i t y l e v e l s have any e f f e c t on g r o u p d i f f e r e n c e s i n a c h i e v e m e n t ? B e c a u s e random a s s i g n m e n t was n o t p o s s i b l e i n t h i s s t u d y , i t seems e s s e n t i a l t h a t i n i t i a l a b i l i t y l e v e l s be c o n t r o l l e d i n some way i f t h e p u r p o s e o f t h e s t u d y i s t o u n c o v e r t h e e f f e c t s on a c h i e v e m e n t o f d i f f e r e n t d e l i v e r y methods. T h i s was n o t done i n t h i s s t u d y , s o we a r e l e f t w i t h r a t h e r i n c o n c l u s i v e r e s u l t s . We know t h a t t h e t e l e c o u r s e g r o u p p e r f o r m e d b e t t e r t h a n t h e on-campus g r o u p , b u t we have no way o f k n o w i n g i f t h i s i s a s t a t i s t i c a l e r r o r due t o t h e h i g h e r d r o p - o u t r a t e i n t h e t e l e c o u r s e g r o u p o r i f t h e t e l e c o u r s e g r o u p b egan a t a h i g h e r l e v e l . T h i s l a t t e r e x p l a n a t i o n seems q u i t e p l a u s i b l e b e c a u s e t h e t e l e c o u r s e g r o u p was much o l d e r , a nd , a c c o r d i n g t o t h e s u r v e y , o f a d i f f e r e n t p e r s o n a l i t y t y p e . From a q u a l i t a t i v e p e r s p e c t i v e , t h i s s t u d y has some m e r i t s . L i k e most o f t h e s t u d i e s i n t h e q u a s i - e x p e r i m e n t a l c a t e g o r y , i t u s e s c o m p l e t e c o u r s e s and t e l e c o u r s e s as a b a s i s o f c o m p a r i s o n and i t does n o t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 60 impose random a s s i g n m e n t on t h e s t u d e n t s . T h i s p r e s e r v e s t h e e c o l o g i c a l v a l i d i t y , b u t b e c a u s e i t a p p e a r s no a t t e m p t i s made t o a s s e s s t h e q u a l i t y o f l e a r n i n g , i t i s r a t h e r m e a n i n g l e s s . D e t a i l s o f t h e a s s e s s m e n t p r o c e d u r e s a r e n o t p r o v i d e d , b u t a d m i n i s t e r i n g a 40 i t e m t e s t t o g a i n i n s i g h t i n t o how s t u d e n t s l e a r n i s n o t an a c c e p t e d q u a l i t a t i v e r e s e a r c h p r a c t i c e . A t h r e e - y e a r s u r v e y o f t e l e c o u r s e and e q u i v a l e n t campus c o u r s e s i n t h e D a l l a s C o u n t y Community C o l l e g e d i s t r i c t i n Texas r e v e a l e d t h a t t h e on-campus s t u d e n t s h a d a s i g n i f i c a n t l y h i g h e r s u c c e s s r a t e ( A g l e r & T i n n , 1 9 7 6 ) . However, t h e r e a r e n o t enough d e t a i l s o f t h e a s s e s s m e n t p r o c e d u r e s t o d e t e r m i n e w h e t h e r o r n o t s t u d e n t a c h i e v e m e n t was a p p r o a c h e d f r o m a g u a l i t a t i v e o r q u a n t i t a t i v e p e r s p e c t i v e . I n t e r m s o f t h e e x p e r i m e n t a l d e s i g n o f t h e s t u d y , t h e r e s u l t s h ave t o be v i e w e d w i t h a g r e a t d e a l o f c a u t i o n . W h i l e p r o p o r t i o n t e s t s were u s e d t o d e t e r m i n e t h e l e v e l o f s i g n i f i c a n c e , t h e r e i s no i n d i c a t i o n t h a t t h e r e was any c o n t r o l o v e r c o n f o u n d i n g v a r i a b l e s s u c h as d i f f e r e n t i n s t r u c t o r s , a nd d i f f e r e n t measurement i n s t r u m e n t s . The g r a d e d i s t r i b u t i o n s f r o m one s e m e s t e r were s i m p l y compared i n e i g h t c o u r s e s . T h ese e i g h t c o u r s e s may have been t a u g h t by e i g h t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 61 d i f f e r e n t i n s t r u c t o r s u s i n g d i f f e r e n t t e s t i n g p r o c e d u r e s and r a t i n g methods. A g l e r (197 6) c o n d u c t e d a q u a n t i t a t i v e l y more r i g o r o u s e x a m i n a t i o n o f one t e l e c o u r s e i n t h e same c o l l e g e d i s t r i c t , an i n t r o d u c t o r y E n g l i s h c o u r s e , W r i t i n g f o r a R e a s o n . A p r e - t e s t / p o s t - t e s t c o n t r o l g r o u p d e s i g n was e m p l o y e d i n one s e m e s t e r t o a s s e s s c h a n g e s i n s t u d e n t w r i t i n g p e r f o r m a n c e a n d a t t i t u d e s f r o m t h e b e g i n n i n g t o t h e end o f t h e s e m e s t e r . W h i l e t h e s t u d e n t s were n o t r a n d o m l y a s s i g n e d t o t h e t e l e c o u r s e and campus g r o u p s , a random s a m p l e f r o m e a c h g r o u p was s e l e c t e d f o r a n a l y s i s . I t i s n o t c l e a r why t h i s was done; i t may have been an a t t e m p t t o r e d u c e t h e s i z e o f t h e t r e a t m e n t and c o n t r o l g r o u p s w h i l e k e e p i n g them r e p r e s e n t a t i v e o f t h e l a r g e r g r o u p f r o m w h i c h t h e y were drawn. S t u d e n t c o m p o s i t i o n s f r o m t h e two g r o u p s were r a t e d b y 4 i n d e p e n d e n t j u d g e s i n t h e f o l l o w i n g a r e a s : 1. c o n t e n t 2. o r g a n i z a t i o n o f t h e e n t i r e p a p e r 3. o r g a n i z a t i o n o f i n d i v i d u a l p a r a g r a p h s 4. s p e l l i n g a n d m e c h a n i c s 5. d i c t i o n u s a g e 6. s e n t e n c e s 7. h o l i s t i c o r o v e r a l l q u a l i t y . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 62 The r e s u l t s r e v e a l e d s i g n i f i c a n t d i f f e r e n c e s i n f a v o r o f t h e t e l e c o u r s e g r o u p i n t h r e e a r e a s : o r g a n i z a t i o n o f t h e e n t i r e p a p e r , o r g a n i z a t i o n o f i n d i v i d u a l p a r a g r a p h s , and h o l i s t i c o r o v e r a l l q u a l i t y o f t h e p a p e r . I n t h e o t h e r f o u r a r e a s t h e r e were no s i g n i f i c a n t d i f f e r e n c e s b e t ween t h e t e l e c o u r s e and t h e on-campus g r o u p . I n a d d i t i o n , t h e f i n a l g r a d e d i s t r i b u t i o n s d i d n o t d i f f e r s i g n i f i c a n t l y b e t w e e n t h e two g r o u p s , and i n k e e p i n g w i t h most o f t h e o t h e r s t u d i e s , t h e d r o p - o u t r a t e f o r t h e t e l e c o u r s e g r o u p was much h i g h e r - 52% v e r s u s 30%. A t f i r s t t h e s e r e s u l t s a p p e a r somewhat a m b i v a l e n t . I t i s e a s y t o r e l e g a t e them t o t h e f a m i l i a r "no s i g n i f i c a n t d i f f e r e n c e s " c a t e g o r y . B u t t h e y a r e more m e a n i n g f u l t h a n t h a t ; t h e s e r e s u l t s s u p p o r t t h e v i e w t h a t p e r h a p s what we a r e t r y i n g t o measure i s n o t m e a s u r a b l e o r a t l e a s t n o t m e a s u r a b l e i f a p p r o a c h e d w i t h a q u a n t i t a t i v e c o n c e p t i o n o f l e a r n i n g . I t i s q u i t e p o s s i b l e t h a t one way o f d e l i v e r i n g a c o u r s e i s more e f f e c t i v e i n t e r m s o f s t u d e n t a c h i e v e m e n t t h a n a n o t h e r a n d t h a t i f we s t o p and t a k e measurements a t s e v e r a l p o i n t s i n t h e c o u r s e we may f i n d s i g n i f i c a n t d i f f e r e n c e s . B u t i t i s a l s o q u i t e l i k e l y t h a t o t h e r f a c t o r s s u c h as m o t i v a t i o n and p e r s i s t e n c e m i g h t o u t w e i g h any i n h e r e n t d i s a d v a n t a g e s o f t h e mode o f t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 63 c o u r s e a n d i n t h e end s t u d e n t s i n t h e two v e r s i o n s may end up w i t h s i m i l a r s c o r e s . So, i n t h e c a s e o f t h i s E n g l i s h c o u r s e , t h e campus s t u d e n t s who d i d p o o r l y i n t h e t h r e e p a r t i c u l a r a r e a s o f c o m p o s i t i o n , o r g a n i z a t i o n o f t h e e n t i r e p a p e r , o r g a n i z a t i o n o f t h e i n d i v i d u a l p a r a g r a p h s , and h o l i s t i c o r o v e r a l l q u a l i t y o f t h e p a p e r , may have w o r k e d h a r d e r i n o t h e r a r e a s a n d so we end up w i t h f i n a l g r a d e d i s t r i b u t i o n s t h a t l o o k much t h e same. I f t h i s i s i n d e e d t h e c a s e , i t p o i n t s o u t t h e n e e d t o r e f i n e o u r methods i n o r d e r t o a c c u r a t e l y p i n p o i n t t h e e f f e c t s o f d i f f e r e n t methods o f c o u r s e d e l i v e r y . I t a l s o p o i n t s o u t t h e n e e d t o r e c o n s i d e r t h e t y p e o f r e s e a r c h q u e s t i o n s we a r e a s k i n g . S i m p l y c o m p a r i n g a c h i e v e m e n t l e v e l s may n o t a c c u r a t e l y r e v e a l t h e u n d e r l y i n g d i f f e r e n c e s i n t h e e f f e c t i v e n e s s o f two methods o f d e l i v e r y i f t h e y e x i s t . F u r t h e r m o r e , i t may be t h a t a c h i e v e m e n t i s n o t t h e v a r i a b l e t h a t n eeds t o be e x a m i n e d . I f we s h i f t f r o m a q u a n t i t a t i v e t o a q u a l i t a t i v e c o n c e p t i o n o f k n o w l e d g e , we d e r i v e a c o m p l e t e l y d i f f e r e n t t y p e o f q u e s t i o n . I n s t e a d o f a s k i n g "Does t h i s o r t h a t method o f d e l i v e r y a f f e c t s t u d e n t a c h i e v e m e n t ? " we a s k "How does t h i s o r t h a t method o f d e l i v e r y a f f e c t t h e way i n w h i c h s t u d e n t s a p p r o a c h t h e w r i t i n g p r o c e s s ? " . A c h i e v e m e n t l e v e l s may n o t d i f f e r s i g n i f i c a n t l y b e c a u s e t h e s e a r e o f t e n T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 64 m e a s u r e d i n q u a n t i t a t i v e t e r m s , b u t p e r h a p s d i f f e r e n t methods o f d e l i v e r y a f f e c t t h e p r o c e s s o f w r i t i n g w h i c h w o u l d be r e f l e c t e d i n q u a l i t a t i v e d i f f e r e n c e s i n t h e s t u d e n t s ' w r i t i n g . Of a l l t h e s t u d i e s r e v i e w e d , t h i s one p r o b a b l y comes c l o s e s t t o a t t e m p t i n g t o a s s e s s t h i s t y p e o f q u a l i t a t i v e d i f f e r e n c e . The u s e o f f o u r i n d e p e n d e n t j u d g e s and s e v e n a r e a s f o r a s s e s s i n g s t u d e n t p r o g r e s s i s a c l e a r d e p a r t u r e f r o m t h e s t r i c t q u a n t i t a t i v e a s s e s s m e n t t e c h n i q u e s s e e n i n t h e o t h e r s t u d i e s . U n f o r t u n a t e l y , t h e s t u d y d i d n o t go f a r enough i n p u r s u i n g a r i g o r o u s q u a l i t a t i v e a n a l y s i s o f t h e s t u d e n t w r i t i n g . S e m i - s t r u c t u r e d i n t e r v i e w s c o u l d have been c o n d u c t e d w i t h t h e s t u d e n t s i n b o t h g r o u p s t o p r o b e t h e i r w r i t i n g p r o c e s s e s , t h e i r a t t i t u d e t o w a r d s t h e c o u r s e a n d t h e way i t was d e l i v e r e d and w h e t h e r t h i s h ad any e f f e c t on how t h e y a p p r o a c h e d t h e i r w r i t i n g . One o f t h e most c o m p r e h e n s i v e and q u a n t i t a t i v e l y r i g o r o u s q u a s i - e x p e r i m e n t a l c o m p a r i s o n s o f t e l e c o u r s e s w i t h e q u i v a l e n t on-campus c o u r s e s i s a s t u d y by S m i t h , J . (1983) c o n d u c t e d a t S a d d l e b a c k C o l l e g e . A l l t e l e c o u r s e and campus s t u d e n t s e n r o l l e d i n i n t r o d u c t o r y c o u r s e s i n P o l i t i c a l S c i e n c e , P s y c h o l o g y , M u s i c and M a r i n e S c i e n c e were i n c l u d e d . The s t u d y was d e s i g n e d t o e v a l u a t e t h r e e a s p e c t s o f t h e t e l e c o u r s e p r o g r a m , T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 65 s t u d e n t r e t e n t i o n , ( d r o p - o u t ) , s t u d e n t a c h i e v e m e n t , and s t u d e n t s a t i s f a c t i o n . The same i n s t r u c t o r t a u g h t b o t h t h e on-campus and t e l e c o u r s e v e r s i o n s o f e a c h c o u r s e . O u t l i n e s o f e a c h t e l e c o u r s e and i t s p a r a l l e l campus c o u r s e were i n s p e c t e d t o e n s u r e t h a t t h e y were i d e n t i c a l a n d a common t e s t was d e v e l o p e d f o r e a c h c o u r s e a n d a d m i n i s t e r e d as a p r e and p o s t - t e s t . The c o m p a r a t i v e a c h i e v e m e n t l e v e l s were t e s t e d u s i n g ANCOVA a t t h e .05 l e v e l o f s i g n i f i c a n c e . S t u d e n t s a t i s f a c t i o n was e v a l u a t e d u s i n g a q u e s t i o n n a i r e w i t h L i k e r t - s c a l e q u e s t i o n s , w h i c h were g i v e n w e i g h t e d v a l u e s , a n d mean s c o r e s were computed. D e s p i t e t h i s c o n s i d e r a b l e q u a n t i t a t i v e r i g o r , t h e r e s u l t s a r e somewhat d i s a p p o i n t i n g i f one i s l o o k i n g f o r g u i d a n c e i n d i s t a n c e e d u c a t i o n c o u r s e d e s i g n a n d d e l i v e r y . The a n a l y s i s o f c o v a r i a n c e i n d i c a t e d t h a t t h e r e was no d i f f e r e n c e i n t h e amount o f l e a r n i n g t h a t t o o k p l a c e i n t h e t e l e c o u r s e compared t o t h e p a r a l l e l on-campus c o u r s e s . I n t e r m s o f s t u d e n t s a t i s f a c t i o n , b o t h g r o u p s were g e n e r a l l y s a t i s f i e d w i t h t h e c o u r s e and t h e d r o p - o u t r a t e f o r t h e t e l e c o u r s e g r o u p was h i g h e r t h a n t h e campus g r o u p . W h i l e i t i s r e a s s u r i n g t o have e v i d e n c e t h a t t e l e c o u r s e d e l i v e r y i s a t l e a s t as e f f e c t i v e as o n - campus d e l i v e r y , t h i s s t u d y does n o t p r o v i d e any i n s i g h t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 66 i n t o t h e q u e s t i o n t h a t needs a n s w e r i n g : does t e l e v i s i o n o r any medium have any i n h e r e n t a d v a n t a g e i n t e r m s o f s t u d e n t a c h i e v e m e n t o v e r any o t h e r medium? I n d e e d , i t c o u l d be a r g u e d t h a t t h e s t u d y d i d n o t r e a l l y t r y t o an s w e r t h e q u e s t i o n i t seems i t was i n t e n d e d t o . As S m i t h , J . (1983) s a y s , "The c o m p a r i s o n i n e d u c a t i o n a l a c h i e v e m e n t b e t w e e n t h e t e l e c o u r s e s a n d t h e p a r a l l e l o n - campus c o u r s e s was i n t e n d e d t o p r o v i d e g u i d a n c e on what t y p e s o f c o u r s e s s h o u l d be o f f e r e d v i a t e l e v i s i o n , a n d what f o r m a t s s h o u l d be e m p l o y e d " (p. 2 5 ) . The q u e s t i o n was a s k e d , b u t s i m p l y c o m p a r i n g a c h i e v e m e n t l e v e l s was n o t t h e way t o answer i t . A p p r o a c h i n g t h e s t u d y f r o m a q u a l i t a t i v e p e r s p e c t i v e may h a v e p r o v i d e d more m e a n i n g f u l r e s u l t s . F o r i n s t a n c e , i t w o u l d have been i n t e r e s t i n g t o p r o b e t h e s t u d e n t s ' u n d e r s t a n d i n g o f some o f t h e c o n c e p t s and i s s u e s i n t h e d i f f e r e n t v e r s i o n s o f t h e c o u r s e s . T h e r e i s e v i d e n c e t h a t i n some u n d e r g r a d u a t e a r t s c o u r s e s , s t u d e n t s h a v e v e r y d i f f e r e n t u n d e r s t a n d i n g s o f some o f t h e k e y c o n c e p t s . I n a 1978 s t u d y o f u n i v e r s i t y e c o n o m i c s s t u d e n t s ' u n d e r s t a n d i n g o f t h e c o n c e p t o f p r i c e , D a h l g r e n (1984) f o u n d t h a t t h e y h a d "two d i s t i n c t a n d c o n t r a s t i n g c o n c e p t i o n s " (p. 3 0 ) . He d i d n o t a r r i v e a t t h i s c o n c l u s i o n b y c o m p a r i n g a c h i e v e m e n t l e v e l s , r a t h e r he a s k e d a v e r y s i m p l e q u e s t i o n : Why does a bun T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 67 c o s t a b o u t one ( Swedish) crown? A f t e r a n a l y z i n g t h e s t u d e n t r e s p o n s e s he was a b l e t o g r o u p them i n t o two " c a t e g o r i e s o f outcome": "A. The p r i c e i s d e p e n d e n t on t h e r e l a t i o n s h i p b e t w e e n t h e s u p p l y o f and demand f o r b u n s . B. The p r i c e i s e q u a l t o t h e ( t r u e ) v a l u e o f t h e bun" (p. 3 0 ) . He c o n c l u d e d t h a t t h e a n s w e r s i n c a t e g o r y A r e p r e s e n t a c o n c e p t i o n o f p r i c e "as s y s t e m d e p e n d e n t , i n t h a t t h e p r i c e o f a commodity i s unknown u n t i l i t i s s u b j e c t t o a b a r g a i n i n g s i t u a t i o n b e t w e e n p r o d u c e r s and c o n s u m e r s i n t h e m a r k e t " (p. 3 0 ) . The c a t e g o r y B a n s w e r s r e v e a l e d "a more o b j e c t - o r i e n t e d c o n c e p t i o n o f p r i c e , f o r t h e s e a n s w e r s s t a t e t h a t t h e p r i c e d e p i c t s t h e p r o d u c t i o n c o s t s and r e a s o n a b l e p r o f i t s on t h e v a r i o u s c o n s t i t u e n t s , w h e t h e r t h e y be p r o d u c t s o r s e r v i c e s " (p. 3 0 ) . C o m p a r i n g t h e s t u d e n t s i n d i f f e r e n t v e r s i o n s o f t h e same c o u r s e i n t e r m s o f t h e i r q u a l i t a t i v e u n d e r s t a n d i n g o f some o f t h e m a j o r c o n c e p t s may have r e v e a l e d some i n t e r e s t i n g d i f f e r e n c e s t h a t w o u l d have p r o v i d e d a n s w e r s t o t h e q u e s t i o n t h a t S m i t h , J . (1983) a s k e d i n h e r s t u d y . C l a g e t t (1983) s u r v e y e d t h e f i n a l g r a d e d i s t r i b u t i o n s o f " t e l e c r e d i t " a nd r e g u l a r on-campus s t u d e n t s a t P r i n c e G e o r g e ' s Community C o l l e g e i n L a r g o , M a r y l a n d , b e t w e e n 197 6 and 1982 and f o u n d t h a t t h e t e l e c r e d i t s t u d e n t s had a l o w e r p a s s r a t e - 69% v e r s u s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 68 7 9%. However t h e s u r v e y a l s o r e v e a l e d t h a t t h e t e l e c r e d i t s t u d e n t s were more l i k e l y t o e a r n A's a n d C's. The s i g n i f i c a n c e o f t h e s e r e s u l t s i s q u e s t i o n a b l e b e c a u s e i t does n o t a p p e a r t h a t t h e r e were any c o n t r o l s . D o nsky, Vaughn, B u r k e & H i t e (1983) compared s t u d e n t a c h i e v e m e n t i n a b u s i n e s s t e l e c o u r s e w i t h e q u i v a l e n t o n - campus day and e v e n i n g c o u r s e s , b u t s t u d e n t s c o r e s were c a l c u l a t e d d i f f e r e n t l y i n t h e two g r o u p s . No p r e - o r p o s t - t e s t o b s e r v a t i o n s were c o n d u c t e d and t h e r e were s i g n i f i c a n t d e m o g r a p h i c d i f f e r e n c e s b e t w e e n t h e two g r o u p s . D e s p i t e t h i s l a c k o f c o n t r o l , an ANOVA was c o n d u c t e d on t h e s t u d e n t s c o r e s and showed t h a t t h e t e l e c o u r s e g r o u p s p e r f o r m e d s i g n i f i c a n t l y h i g h e r t h a n t h e on-campus g r o u p s . W i t h so few c o n t r o l s , however, t h i s k i n d o f r e s u l t i s r a t h e r m e a n i n g l e s s . The c a u s e o f t h e d i f f e r e n c e c o u l d be s o m e t h i n g as s i m p l e as s t a t i s t i c a l e r r o r , o r s o m e t h i n g more c o m p l e x s u c h a s t h e i n h e r e n t d i f f e r e n c e s o f t h e two p o p u l a t i o n s . Z i g e r e l l & Chausow (1983) compared a l l o f t h e t h i r d - y e a r t e l e c o u r s e r e s u l t s i n C h i c a g o ' s TV C o l l e g e w i t h t h e e q u i v a l e n t on-campus c o u r s e s i n t e r m s o f a c h i e v e m e n t . Once a g a i n , t h e q u a n t i t a t i v e r i g o r was l a c k i n g . I t i s n o t c l e a r what, i f any, v a r i a b l e s were c o n t r o l l e d s u c h as i n s t r u c t o r and m a r k i n g method. The r e s u l t s a r e e q u a l l y a m b i g u o u s , w i t h some c o u r s e s f a v o r i n g t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 69 t e l e c o u r s e s t u d e n t a c h i e v e m e n t a nd o t h e r s f a v o r i n g t h e campus s t u d e n t . T e l e v i s i o n on-campus and a t a d i s t a n c e . Brown (1976) c o n d u c t e d a q u a s i - e x p e r i m e n t a l s t u d y t o compare t h e e f f e c t i v e n e s s o f t e l e c o u r s e s w i t h e q u i v a l e n t o n - campus c o u r s e s a t t h e U n i v e r s i t y o f M i d - A m e r i c a . I n a d d i t i o n t o c o m p a r i n g t h e e f f e c t i v e n e s s o f t h e two d e l i v e r y methods, Brown a l s o t r i e d t o d e t e r m i n e t h e e f f e c t i v e n e s s o f i n c l u d i n g t h e t e l e c o u r s e t e l e v i s i o n p r o g r a m s i n t h e on-campus v e r s i o n o f t h e c o u r s e . The c o u r s e u s e d f o r t h e c o m p a r i s o n was I n t r o d u c t o r y A c c o u n t i n g . T h e r e were a c t u a l l y f o u r t r e a t m e n t g r o u p s , one t a k i n g t h e c o u r s e by d i s t a n c e e d u c a t i o n , one o n - campus, one on-campus b u t u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s , a n d one on-campus u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s w i t h o u t t h e t e l e v i s i o n p r o g r a m s . The d i s t a n c e e d u c a t i o n g r o u p a nd two o f t h e campus g r o u p s r e c e i v e d a t e x t b o o k , s t u d y g u i d e , s i x t e e n 1 5 - t o - 3 0 - m i n u t e a u d i o t a p e s w h i c h p r e s e n t e d a c c o u n t i n g p r o b l e m s i n "a l i g h t , d r a m a t i c f o r m a t d e s i g n e d f o r l e a r n e r i n t e r a c t i o n . " a n d 16 newspaper a r t i c l e s w h i c h p r o v i d e d a b r i e f j o u r n a l i s t i c o v e r v i e w o f e a c h l e s s o n . The d i s t a n c e e d u c a t i o n g r o u p a nd one o f t h e campus g r o u p s u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s a l s o w a t c h e d 15, 3 0 - m i n u t e t e l e v i s i o n p r o g r a m s w h i c h p r o v i d e d T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 70 " e x e m p l a r s o f k e y a c c o u n t i n g c o n c e p t s t h r o u g h a v a r i e t y o f v i s u a l i z a t i o n t e c h n i q u e s s u c h as v i g n e t t e s . " The o t h e r on-campus g r o u p u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s d i d n o t r e c e i v e t h e t e l e v i s i o n p r o g r a m s . B o t h on-campus g r o u p s u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s a l s o h a d a c c e s s t o a c l a s s r o o m t e a c h e r a n d i n t e r a c t i o n w i t h f e l l o w s t u d e n t s w h i c h were n o t a v a i l a b l e t o t h e d i s t a n c e e d u c a t i o n g r o u p . The r e g u l a r on-campus g r o u p h a d r e g u l a r l e c t u r e s , i n t e r a c t i o n w i t h t h e i r i n s t r u c t o r and f e l l o w s t u d e n t s and t h e same t e x t b o o k , b u t n o t t h e o t h e r d i s t a n c e e d u c a t i o n m a t e r i a l s . The same c r i t e r i o n t e s t s were u s e d t o measure l e a r n e r a c h i e v e m e n t i n a l l f o u r g r o u p s a n d t h e y i n d i c a t e t h a t t h i s s t u d y a p p r o a c h e d l e a r n i n g f r o m a q u a n t i t a t i v e p e r s p e c t i v e . The measurement o f s t u d e n t a c h i e v e m e n t c o n s i s t e d o f t h r e e e q u a l l y - w e i g h t e d m u l t i p l e - c h o i c e t e s t s w i t h 28-30 i t e m s w h i c h were g i v e n d u r i n g t h e c o u r s e . To a s s e s s a t t i t u d e s t o w a r d s t h e c o u r s e s , s t u d e n t s were a s k e d t o c o m p l e t e a c o u r s e e v a l u a t i o n a t t h e e nd o f e a c h u n i t a n d a t t h e end o f t h e c o u r s e . A c o m p a r i s o n o f a c h i e v e m e n t l e v e l s b e t w e e n t h e o n - campus s t u d e n t s u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s a n d t h e d i s t a n c e e d u c a t i o n s t u d e n t s showed t h a t d i s t a n c e e d u c a t i o n s t u d e n t s h ad s l i g h t l y h i g h e r g r a d e s . S t u d e n t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 71 e v a l u a t i o n s r e v e a l e d t h a t t h e campus d i s t a n c e e d u c a t i o n g r o u p r a t e d t h e c o u r s e l o w e r i n t e r m s o f o v e r a l l a p p e a l and t h e i r i n t e r e s t i n i t t h a n t h e o f f - c a m p u s g r o u p and t h e y r a t e d i t as e a s i e r t h a n t h e o f f - c a m p u s g r o u p . The u s e o f t h e 15 t e l e v i s i o n p r o g r a m s a p p e a r s n o t t o have h a d any s i g n i f i c a n t e f f e c t on t h e two g r o u p s . A c h i e v e m e n t l e v e l s were n o t s i g n i f i c a n t l y d i f f e r e n t b e t w e e n t h e g r o u p u s i n g t e l e v i s i o n a nd t h e g r o u p n o t . I n a d d i t i o n , t h e s t u d e n t c o u r s e e v a l u a t i o n s showed t h a t t h e u s e o f t e l e v i s i o n d i d n o t make t h e c o u r s e any more a p p e a l i n g . A f i n a l c o m p a r i s o n on a p p e a l was made b e t w e e n t h e on-campus s t u d e n t s u s i n g t h e d i s t a n c e e d u c a t i o n m a t e r i a l s a n d t h o s e e n r o l l e d i n t h e t r a d i t i o n a l o n - campus c o u r s e . The r e s u l t s showed no s i g n i f i c a n t d i f f e r e n c e i n a p p e a l . U n f o r t u n a t e l y , no c o m p a r i s o n i s made i n t e r m s o f a s t u d e n t a c h i e v e m e n t b e t w e e n t h e r e g u l a r on-campus g r o u p and t h e d i s t a n c e e d u c a t i o n g r o u p . The s t u d y f o u n d t h a t d r o p - o u t was h i g h e r f o r t h e d i s t a n c e e d u c a t i o n g r o u p w h i c h may p o i n t o u t t h e n e e d f o r s u p p o r t , e n c o u r a g e m e n t and p a c i n g f o r t h e d i s t a n c e e d u c a t i o n s t u d e n t b e c a u s e "a c o u r s e w h i c h has f o r e v e r t o be done w i l l n e v e r be done ( a t l e a s t by some e n r o l l e e s ) , a n d t h a t e x t e r n a l a s s i s t a n c e and e n c o u r a g e m e n t i s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 72 n e c e s s a r y i f a r e s p e c t a b l e p e r c e n t a g e o f e n r o l l e e s a r e t o c o m p l e t e a c o u r s e w i t h i n r e a s o n a b l e t i m e l i n e s " (p. 25) . The most s i g n i f i c a n t c o n c l u s i o n o f t h e s t u d y has t o do w i t h t h e use o f t h e t e l e v i s i o n component: when s u c h a component p r e s e n t s c o n t e n t w h i c h i s a l s o p r e s e n t e d i n o t h e r components, i t w i l l n o t have a s i g n i f i c a n t e f f e c t on a c h i e v e m e n t l e v e l s n o r w i l l i t make t h e c o u r s e more a p p e a l i n g . Brown (1976) c o n c l u d e d t h a t i f t h i s f i n d i n g i s g e n e r a l i z a b l e t o o t h e r d i s t a n c e e d u c a t i o n s e t t i n g s t h e n u s i n g t e l e v i s i o n i n a " s u p p o r t i v e o r r e d u n d a n c y " r o l e c a n n o t be j u s t i f i e d i n t e r m s o f i t s p o s i t i v e e f f e c t on a c h i e v e m e n t o r a t t i t u d e s . However i t i s q u e s t i o n a b l e w h e t h e r t h i s f i n d i n g w o u l d be g e n e r a l i z a b l e b e c a u s e campus s t u d e n t s have i n s t r u c t o r a nd s t u d e n t i n t e r a c t i o n t h a t may s u b s t i t u t e f o r t h e t e l e v i s i o n component; d i s t a n c e e d u c a t i o n s t u d e n t s do n o t and p e r h a p s t h e y may f i n d t h e t e l e v i s i o n p r o g r a m s f i l l t h a t r e d u n d a n c y r o l e . Brown (197 6) makes an i m p o r t a n t o b s e r v a t i o n a b o u t how t e l e v i s i o n was u s e d i n t h i s c o u r s e . I n h i s o p i n i o n i t was n o t u s e d e f f e c t i v e l y b e c a u s e t h e c o u r s e d i d n o t l e n d i t s e l f w e l l t o t h e medium; a c c o u n t i n g i s n o t a p a r t i c u l a r l y v i s u a l t o p i c . The s t u d e n t s a l s o d i d n o t r a t e t h e t e l e v i s i o n p r o g r a m s a v e r y i m p o r t a n t component o f t h e c o u r s e . T e l e v i s i o n i n Distance Education 73 While t h i s study provides some i n t e r e s t i n g r e s u l t s , i t s major weakness l i e s i n the f a c t that i t examines an unnatural s i t u a t i o n : comparing achievement and appeal of d i s t a n c e education students using a d i s t a n c e education course with campus students using the same course m a t e r i a l s . As the study revealed, these are two d i f f e r e n t populations with d i f f e r e n t motivations f o r studying, d i f f e r e n t goals and d i f f e r e n t views as to what c o n s t i t u t e s a good or appealing course. The on-campus student would not normally take a course that i n v o l v e d d i s t a n c e education m a t e r i a l s . A more v a l i d and u s e f u l comparison would be between the distance education students and the on-campus students e n r o l l e d i n the r e g u l a r campus course. The f i n d i n g s i n regards to the value of the t e l e v i s i o n component are a l s o questionable because the d i s t a n c e education students were not used i n the comparison. The concept of the t e l e c o u r s e was designed to meet the needs of the students at a d i s t a n c e who do not have access t o student and i n s t r u c t o r i n t e r a c t i o n . I t i s q u i t e p o s s i b l e , and indeed i t has u s u a l l y been assumed by course designers, that the t e l e v i s i o n component does p l a y an important r o l e f o r the d i s t a n c e education student. I t i s unfortunate that t h i s study T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 74 d i d n o t t a k e t h e o p p o r t u n i t y t o t e s t t h a t a s s u m p t i o n , b u t i n s t e a d l o o k e d a t a l e s s m e a n i n g f u l c o m p a r i s o n . I f t h e s t u d y h a d b e e n a p p r o a c h e d f r o m a q u a l i t a t i v e p e r s p e c t i v e , i n a d d i t i o n t o e x a m i n i n g q u a l i t a t i v e d i s t i n c t i o n s i n s t u d e n t s ' u n d e r s t a n d i n g , i t c o u l d have p r o b e d more d e e p l y t h e a p p e a l o f t h e t e l e v i s i o n component. The f i n d i n g s i n t h i s r e g a r d a r e i n t e r e s t i n g b u t i n c o m p l e t e . The q u a n t i t a t i v e m e a s u res c o u l d have b e e n f o l l o w e d up w i t h i n t e r v i e w s w i t h s t u d e n t s a b o u t t h e i r r e a c t i o n s t o t h e t e l e v i s i o n p r o g r a m s . S t u d e n t s c o u l d have been o b s e r v e d as t h e y w a t c h e d t h e p r o g r a m s t o s e e i f t h e t e l e v i s i o n - w a t c h i n g b e h a v i o r o f t h e d i f f e r e n t g r o u p s d i f f e r e d . U n f o r t u n a t e l y , t h e n a t u r e o f t h e s t u d y l e a v e s us w i t h a v e r y o n e - d i m e n s i o n a l a n d i n c o m p l e t e p i c t u r e o f t h e s t u d e n t r e a c t i o n t o t h e t e l e v i s i o n p r o g r a m s . C l a s s r o o m i n s t r u c t i o n u s i n g t e l e v i s i o n . R o b i n s o n & West (1986) c a r r i e d o u t a s t u d y t o measure t h e e f f e c t i v e n e s s o f an i n t e r a c t i v e c a b l e t e l e v i s i o n i n s t r u c t i o n s y s t e m u s e d t o o f f e r s e c o n d a r y s c h o o l c l a s s e s . The s y s t e m c o n s i s t e d o f an o r i g i n a t i n g c l a s s r o o m w h i c h h a d a l i v e i n s t r u c t o r a nd s e v e r a l r e m o t e s i t e s w h i c h r e c e i v e d t h e i n s t r u c t i o n by t e l e v i s i o n . M a th, s h o r t h a n d , S p a n i s h and C h e m i s t r y were d e l i v e r e d u s i n g t h i s s y s t e m . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 75 The m a i n p u r p o s e o f t h e s t u d y was t o d e t e r m i n e i f t e a c h i n g o r l e a r n i n g was a f f e c t e d b y t h e u s e o f t h i s d e l i v e r y s y s t e m . The s t u d y was c o n d u c t e d i n t h e s e c o n d y e a r o f t h e f i v e y e a r p r o j e c t . The r e s u l t s i n d i c a t e d t h a t t h e u s e o f t h e s y s t e m d i d n o t a p p e a r t o be a f f e c t i n g t e a c h i n g o r l e a r n i n g . S t u d e n t s a t t h e r e m o t e s i t e s were a c h i e v i n g as w e l l as s t u d e n t s a t t h e o r i g i n a t i n g s c h o o l and s t u d e n t s u s i n g t h e i n t e r a c t i v e t e l e v i s i o n s y s t e m p e r f o r m e d a l m o s t as w e l l as s t u d e n t s who t o o k t h e c o u r s e i n t h e t r a d i t i o n a l manner. S t u d e n t a t t i t u d e s t o w a r d s t a k i n g t h e c o u r s e i n t h i s manner were a l s o f a v o r a b l e . I n t e r e s t i n g l y , t h e b i g g e s t c o n c e r n s a b o u t u s i n g t h i s t e c h n o l o g y were r a i s e d by t h e t e a c h e r s who f e a r e d t h e l o s s o f t h e i r j o b s , and h a d a g e n e r a l f e a r o f t h e t e c h n o l o g y . L e a r n e r r e s p o n s e s t o t h e t e l e v i s i o n component. The l a c k o f d e t a i l e d i n f o r m a t i o n on how t o b e s t e m p l o y t h e d i f f e r e n t m e d i a i n t h e d e l i v e r y o f d i s t a n c e e d u c a t i o n has a l r e a d y been t o u c h e d on. I t i s t h i s t y p e o f d a t a t h a t w o u l d p r o v i d e t h e most u s e f u l g u i d a n c e t o c o u r s e d e s i g n e r s a n d d i s t a n c e e d u c a t i o n p o l i c y m a k e r s . Brown (1975) p r o v i d e s t h e o n l y i n f o r m a t i o n t h a t b e g i n s t o f i l l t h a t gap. He e x a m i n e d l e a r n e r r e s p o n s e s t o t h e t e l e v i s i o n component o f some o f t h e d i s t a n c e e d u c a t i o n c o u r s e s o f f e r e d by t h e U n i v e r s i t y o f M i d - A m e r i c a . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 76 F o u r c o u r s e s were s t u d i e d : I n t r o d u c t o r y P s y c h o l o g y , A c c o u n t i n g I , Consumer E x p e r i e n c e s , and a c o m p u t e r c o u r s e , M a k i n g I t C o u n t . The t e l e v i s i o n p r o g r a m s i n t h e s e c o u r s e s were n o t u s e d j u s t t o b r o a d c a s t l e c t u r e s . I n s t e a d v i g n e t t e s , s t o r y l i n e s , a n i m a t i o n and o t h e r v i s u a l t e c h n i q u e s t o make e f f e c t i v e u se o f t e l e v i s i o n were e m p l o y e d . T h i s d e c i s i o n was b a s e d on " p r i o r i n s t r u c t i o n a l t e l e v i s i o n r e s e a r c h i n d i c a t i n g t h a t t e l e v i s e d l e c t u r e s a r e n o t p a r t i c u l a r l y e f f e c t i v e " (p. 1 0 ) . I n a d d i t i o n , t e l e v i s i o n i s u s e d as a p r i n c i p a l r a t h e r t h a n an a d j u n c t medium i n t h e U.M.A. t e l e c o u r s e s and a l l t h e t e l e c o u r s e s a r e m u l t i - m e d i a p a c k a g e s . F o r most d i s t a n c e t e a c h i n g i n s t i t u t i o n s , t e l e v i s i o n p l a y s a l i m i t e d r o l e . The p r i n c i p a l medium o f i n s t r u c t i o n i s u s u a l l y p r i n t ( B a t e s , 1 9 8 4 ) . The m a i n f i n d i n g s o f t h i s s t u d y were as f o l l o w s : 1. L e a r n e r s c o n s i d e r t h e t e l e v i s i o n p r o g r a m s t o be h e l p f u l t o v e r y h e l p f u l . 2. The b r o a d c a s t t e l e v i s i o n component s e r v e d an i m p o r t a n t p a c i n g f u n c t i o n . 3. The t e l e v i s i o n component i s l e s s i m p o r t a n t i n l e a r n e r s t u d y t h a n o t h e r components. 4. L e a r n e r s r e s p o n d p o s i t i v e l y t o t e l e v i s i o n p r o g r a m s where t h e i r r o l e i s p e r c e i v e d as p r e s e n t i n g T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 77 m a t e r i a l c l e a r l y r e l a t e d t o e x p l i c i t c o u r s e o b j e c t i v e s . 5. L e a r n e r s r e s p o n d n e g a t i v e l y t o t h e a s p e c t s o f t e l e v i s i o n p e r c e i v e d as e n t e r t a i n m e n t . 6. L e a r n e r s seem more s a t i s f i e d w i t h t e l e v i s i o n p r o g r a m s when m a t e r i a l o f c l e a r i m p o r t a n c e i n t h e c o u r s e i s p r e s e n t e d i n a d i f f e r e n t manner f r o m t h e way m a t e r i a l i s c o v e r e d i n o t h e r c o m p o n e n t s . These f i n d i n g s p r o v i d e s i g n i f i c a n t d a t a f o r c o u r s e d e s i g n e r s and p o l i c y m a k e r s . I n g e n e r a l t h e y i n d i c a t e t h a t t h e t e l e v i s i o n component can be an i m p o r t a n t p a r t o f t h e c o u r s e p a c k a g e , b u t i t must be c a r e f u l l y d e s i g n e d and i n t e g r a t e d . I t s r o l e must be e x p l i c i t and i t must be u s e d d i f f e r e n t l y f r o m o t h e r components. Brown's (1976) s t u d y r e v i e w e d e a r l i e r t e n d s t o c o n f i r m some o f t h e s e f i n d i n g s b o t h i n t e r m s o f s t u d e n t a p p e a l and a c h i e v e m e n t . These two f a c t o r s w i l l n o t be a f f e c t e d when t h e t e l e v i s i o n component p r e s e n t s c o n t e n t w h i c h has a l r e a d y been p r e s e n t e d i n a n o t h e r component. The f i n d i n g s o f S e l l (1976) a l s o t e n d t o c o n f i r m Brown's (1975, 1976) f i n d i n g s w i t h r e g a r d t o t h e r o l e o f t e l e v i s i o n . S e l l e v a l u a t e d s t u d e n t r e s p o n s e s t o an I n t r o d u c t o r y P s y c h o l o g y c o u r s e o f f e r e d b y d i s t a n c e e d u c a t i o n a t t h e U n i v e r s i t y o f M i d - A m e r i c a . He f o u n d t h a t s t u d e n t s c r i t i c i z e d t h e t e l e v i s i o n p r o g r a m s f o r T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 78 t h e i r l a c k o f o v e r l a p w i t h t h e t e x t m a t e r i a l . They w a n t e d more s u b s t a n c e i n t h e p r o g r a m s a nd more d i r e c t t i e s t o t h e t e x t m a t e r i a l . T a k i n g t h e f i n d i n g s o f Brown (1975, 1976) and S e l l (1976) t o g e t h e r i t a p p e a r s t h a t s t u d e n t s want t h e t e l e v i s i o n p r o g r a m s t o p r e s e n t new m a t e r i a l t h a t i s e x p l i c i t l y r e l a t e d t o t h e c o u r s e a n d i s c l e a r l y i n t e g r a t e d w i t h t h e o t h e r c o u r s e c o m p o n e n t s . The R e l a t i v e i m p o r t a n c e o f d i s t a n c e e d u c a t i o n c o u r s e c o m p o n e n t s . The r e l a t i v e i m p o r t a n c e t h a t s t u d e n t s p l a c e on t h e v a r i o u s components o f a d i s t a n c e e d u c a t i o n c o u r s e i s s o m e t h i n g t h a t many s t u d i e s a n d e v a l u a t i o n s have e x a m i n e d a n d t h e r e s u l t s a r e f a i r l y c o n s i s t e n t . ( D a l l a s C o u n t y Community C o l l e g e D i s t r i c t , 1983; P u r d y , 1 9 7 8 ) . G e n e r a l l y , i n a m u l t i m e d i a t e l e c o u r s e , s t u d e n t s r a t e t h e p r i n t m a t e r i a l - s t u d y g u i d e and t e x t b o o k s - a s t h e most i m p o r t a n t . D e s p i t e t h e h e a v y i n v e s t m e n t o f r e s o u r c e s , t h e t e l e v i s i o n p r o g r a m s a r e u s u a l l y r a t e d t h i r d o r f o u r t h i n o v e r a l l i m p o r t a n c e . Summary and C o n c l u s i o n s Summary. Taken a t f a c e v a l u e , t h e r e s e a r c h i n t h i s f i e l d c a n be u s e d t o s u p p o r t j u s t a b o u t any p o s i t i o n . Those i n f a v o r o f d i s t a n c e e d u c a t i o n c a n c e r t a i n l y f i n d many s t u d i e s t o s u p p o r t t h e i r c a u s e . Those who b e l i e v e t h a t d i s t a n c e e d u c a t i o n p r o v i d e s an i n f e r i o r q u a l i t y o f i n s t r u c t i o n c a n a l s o f i n d s t u d i e s t o s u p p o r t t h e i r T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 79 p o s i t i o n . B u t i f one l o o k s a t a l l o f t h e r e s e a r c h a n d a t t e m p t s t o draw some o v e r a l l c o n c l u s i o n s , i t w o u l d be d i f f i c u l t t o s u p p o r t any p o s i t i o n . A b o u t t h e o n l y t h i n g t h a t c a n be s a i d w i t h c e r t a i n t y i s t h a t t h e r e does n o t a p p e a r t o be any s i g n i f i c a n t d i f f e r e n c e i n s t u d e n t a c h i e v e m e n t a nd a t t i t u d e s b e t w e e n d i s t a n c e e d u c a t i o n i n s t r u c t i o n a n d on-campus i n s t r u c t i o n a n d t h a t d r o p - o u t r a t e s a r e h i g h e r i n d i s t a n c e e d u c a t i o n c o u r s e s . B u t e v e n t h i s r e s u l t i s q u e s t i o n a b l e b e c a u s e much o f t h e r e s e a r c h s u f f e r s f r o m s e r i o u s m e t h o d o l o g i c a l p r o b l e m s a n d a l l o f i t h a s been c o n d u c t e d f r o m a q u a n t i t a t i v e p e r s p e c t i v e u s i n g e x p e r i m e n t a l o r q u a s i - e x p e r i m e n t a l m e thods. The few i m p o r t a n t f i n d i n g s i n t h e r e s e a r c h r e v i e w e d h e r e p r o v i d e some i n s i g h t on t h e u s e s o f t e l e v i s i o n . I t a p p e a r s t h a t s t u d e n t s p r e f e r t h e i r i n s t r u c t i o n a l t e l e v i s i o n p r o g r a m s t o p r e s e n t m a t e r i a l t h a t i s e x p l i c i t l y r e l a t e d t o t h e c o u r s e . They a r e n o t p l e a s e d when i t a p p e a r s t o be e n t e r t a i n m e n t . T h e r e a l s o a p p e a r s t o be a n e e d f o r i n t e r a c t i o n w i t h t h e i n s t r u c t o r i n a d d i t i o n t o t h e i n s t r u c t i o n a l t e l e v i s i o n p r o g r a m s a n d one s t u d y q u e s t i o n e d t h e v a l u e o f t e l e v i s i o n i f i t o n l y s e r v e d a r e d u n d a n c y r o l e . S t u d e n t s a l s o a p p e a r t o p r e f e r t e l e v i s i o n p r o g r a m s i n w h i c h t h e p r e s e n t e r i s T e l e v i s i o n i n Distance Education 80 a c t u a l l y an a c t o r i n the v i g n e t t e s rather than a t h i r d p a r t y d e s c r i b i n g them. Conclusions. Despite the vast amount of research that has been conducted i n t h i s f i e l d , there are only a few meaningful r e s u l t s . For the purposes of t h i s study, the most important c o n c l u s i o n that can be drawn i s that there i s no c o n c l u s i v e evidence that one p a r t i c u l a r method of d e l i v e r y or medium i s s i g n i f i c a n t l y b e t t e r i n terms of student achievement and completion. I f much of the research was of s u p e r i o r q u a l i t y and focused on t h i s question, and i f at l e a s t some of i t attempted to examine the q u a l i t a t i v e d i f f e r e n c e s i n l e a r n i n g from d i f f e r e n t media, there would be l i t t l e p o i n t i n pursuing i t . But as has already been discussed, t h i s i s not the case. There i s a l i m i t e d amount of t r u l y experimental research and what there i s i s o f t e n flawed. There i s much more quasi-experimental research, but i t a l s o lacks i n q u a l i t y and o f t e n trades o f f i n t e r n a l v a l i d i t y f o r e c o l o g i c a l v a l i d i t y . The research a l s o f a i l s t o deal with s p e c i f i c s of course d e l i v e r y . We seem to s t i l l be caught up with the need to prove the value of d i s t a n c e education i n g e n e r a l . I t has already been poi n t e d out that d i s t a n c e education i s f i r m l y e s t a b l i s h e d as a means of p r o v i d i n g access to education to m i l l i o n s of people a l l over the T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 81 w o r l d . E v e n i f i t c o u l d be d e m o n s t r a t e d c o n c l u s i v e l y t h a t d i s t a n c e e d u c a t i o n s t u d e n t s do n o t a c h i e v e as h i g h l y as on-campus s t u d e n t s , s u r e l y t h e d e m o c r a t i z i n g e f f e c t t h a t d i s t a n c e e d u c a t i o n has on h i g h e r e d u c a t i o n w o u l d o u t w e i g h t h i s d i s a d v a n t a g e . I t s h o u l d no l o n g e r be n e c e s s a r y t o p r o v e t h e v a l u e o f t h i s method o f d e l i v e r y . More i m p o r t a n t i s t h e n e e d t o f i n d o u t how d i s t a n c e e d u c a t i o n c a n be i m p r o v e d . W h i l e t h i s r e v i e w d i d f i n d some r e s u l t s i n t h i s a r e a , i n g e n e r a l r e s e a r c h e r s have f a i l e d t o a d e q u a t e l y d e a l w i t h t h i s i m p o r t a n t a s p e c t o f d i s t a n c e e d u c a t i o n . I t i s s u g g e s t e d t h a t a m a j o r r e a s o n f o r t h i s i s t h e a l m o s t t o t a l a d h e r e n c e t o t h e h y p o t h e t i c o - d e d u c t i v e r e s e a r c h p a r a d i g m . T h i s p a r a d i g m assumes a q u a n t i t a t i v e c o n c e p t i o n o f k n o w l e d g e w h i c h v i e w s l e a r n i n g as e s s e n t i a l l y a r e p r o d u c t i v e p r o c e s s . C o n s e q u e n t l y , r e s e a r c h e r s have f o c u s e d a l m o s t e x c l u s i v e l y on c o m p a r i n g a c h i e v e m e n t and a t t i t u d e s i n n a r r o w q u a n t i t a t i v e t e r m s . As t h i s r e v i e w has d e m o n s t r a t e d , i t has b een e x t r e m e l y d i f f i c u l t t o a c c o m p l i s h t h i s i n p r o p e r l y c o n t r o l l e d e x p e r i m e n t s , so we a r e l e f t w i t h r e s u l t s t h a t n o t o n l y a r e i n c o n c l u s i v e a b o u t t h e q u a n t i t y o f l e a r n i n g , b u t a l s o r e v e a l n o t h i n g a b o u t t h e q u a l i t y o f l e a r n i n g . The few s t u d i e s t h a t a p p r o a c h e d p e r f e c t i o n i n t e r m s o f e x p e r i m e n t a l c o n t r o l h a v e i m p o s e d s u c h s t r i c t c o n d i t i o n s T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 82 on t h e l e a r n i n g s i t u a t i o n s i n v o l v e d t h a t t h e y a r e e x t r e m e l y u n n a t u r a l and t h u s have q u e s t i o n a b l e e c o l o g i c a l v a l i d i t y . I t seems t h e n t h a t c o n d u c t i n g t h i s t y p e o f r e s e a r c h i n t h e q u a n t i t a t i v e p a r a d i g m i s a l m o s t a " n o - w i n " s i t u a t i o n . The more c o n t r o l l e d t h e e x p e r i m e n t , t h e l e s s n a t u r a l i t becomes and t h e l e s s g e n e r a l i z a b l e i t becomes t o s i m i l a r g r o u p s o f l e a r n e r s i n d i s s i m i l a r c o n d i t i o n s . On t h e o t h e r hand, t h e l e s s c o n t r o l l e d t h e e x p e r i m e n t , t h e l e s s i n t e r n a l l y v a l i d i t becomes. T h i s p o i n t s o u t t h e n e e d f o r r e s e a r c h e r s t o s h i f t p e r s p e c t i v e s f r o m t h a t o f t h e o b s e r v e r t o t h a t o f t h e l e a r n e r , f r o m one t h a t m e a s ures "how much has been l e a r n e d " t o "what i s l e a r n e d " . As P a r l e t t & H a m i l t o n (1972) and B a n t o c k (1961) o b s e r v e d , j u s t b e c a u s e t h e " a g r i c u l t u r a l - b o t a n i c a l " r e s e a r c h p a r a d i g m w o r k s f o r p l a n t s and i n a n i m a t e m a t t e r , i s no r e a s o n t o assume i t i s s u i t a b l e f o r human b e h a v i o r b e c a u s e human b e h a v i o r i s p u r p o s e f u l . S t u d e n t s , t h e y a r g u e d , w i l l n o t r e a c t t o d i f f e r e n t t r e a t m e n t s j u s t as p l a n t s r e a c t t o d i f f e r e n t f e r t i l i z e r s . R e s e a r c h , t h e n , needs t o be s h i f t e d f r o m t h i s p a r a d i g m t o t h e q u a l i t a t i v e p a r a d i g m . T h i s w i l l e n s u r e " t h a t t h e e x p l a n a t i o n s o f s t u d e n t l e a r n i n g n o t o n l y have e c o l o g i c a l v a l i d i t y w i t h i n t h e r e a l u n i v e r s i t y , c o l l e g e o r s c h o o l c o n t e x t , b u t a l s o e n a b l e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 83 t h e r e s e a r c h e r t o make an i n t e r p r e t a t i o n o f t h e f i n d i n g s w h i c h does j u s t i c e t o t h e t o t a l i t y o f t h e s t u d e n t s ' own e x p e r i e n c e s " ( E n t w i s t l e , 1984, p. 1 7 ) . As f o r t h e f o c u s o f t h e r e s e a r c h , t h i s r e v i e w makes i t c l e a r t h a t t h e r e i s a n e e d f o r an e x a m i n a t i o n o f i f a n d how d i f f e r e n t methods o f d e l i v e r y s u c h as p r i n t , v i d e o t a p e , t e l e v i s i o n , a u d i o t a p e e t c . a f f e c t t h e q u a l i t y o f l e a r n i n g . S t u d i e s n e e d t o be l a u n c h e d t h a t e x a m i n e q u a l i t a t i v e d i f f e r e n c e s i n how s t u d e n t s r e a c t t o a n d l e a r n f r o m d i f f e r e n t m e d i a i n d i s t a n c e e d u c a t i o n . More a t t e n t i o n n e e d s t o be p a i d t o s t u d e n t a t t i t u d e s t o w a r d s s u b j e c t a r e a s and p a r t i c u l a r c o u r s e s . E v e n i f t h e r e i s no d i f f e r e n c e i n e i t h e r t h e q u a n t i t y o r q u a l i t y o f l e a r n i n g , i t i s n o t u n r e a s o n a b l e t o q u e s t i o n w h e t h e r d i f f e r e n t m e d i a o r methods o f d e l i v e r y m i g h t have an a f f e c t on s t u d e n t s ' p e r c e p t i o n o f t h e c o u r s e , t h e i n s t r u c t o r , o r t h e s u b j e c t m a t t e r . H i g h l y a c h i e v i n g s t u d e n t s who n e v e r want t o d e a l w i t h t h e s u b j e c t m a t t e r a g a i n a r e c l e a r l y q u a l i t a t i v e l y d i f f e r e n t f r o m s t u d e n t s who f i n i s h t h e i r c o u r s e w i t h e n t h u s i a s m and a deep i n t e r e s t i n t h e s u b j e c t . These d i f f e r e n c e s i n t h e q u a l i t y o f l e a r n i n g and t h e q u a l i t y o f s t u d e n t a t t i t u d e s a r e b e s t e x a m i n e d f r o m t h e p e r s p e c t i v e o f t h e l e a r n e r w i t h o u t p r e - c o n c e i v e d n o t i o n s o f what t h e outcomes may be. R e s e a r c h c o n d u c t e d i n t h e h y p o t h e t i c o - d e d u c t i v e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 84 p a r a d i g m h a s n o t p r o v i d e d a n s w e r s t o t h e s e q u e s t i o n s b e c a u s e t h e e x p e r i m e n t a l m e t h o d o l o g y u s u a l l y a s s o c i a t e d w i t h i t makes i t d i f f i c u l t a n d b e c a u s e i t c a r r i e s w i t h i t a c o n c e p t i o n o f k n o w l e d g e w h i c h does n o t p e r m i t t h e s e t y p e s o f q u e s t i o n s t o be a s k e d . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 85 C h a p t e r I I I - A P r o p o s a l f o r a Q u a l i t a t i v e S t u d y R a t i o n a l e The r e v i e w o f l i t e r a t u r e and r e s e a r c h has r e v e a l e d few m e a n i n g f u l r e s u l t s t h a t c a n h e l p d i s t a n c e e d u c a t i o n p r a c t i t i o n e r s i n t h e i r s e l e c t i o n a nd use o f m e d i a . I t i s s u g g e s t e d t h a t a m a j o r r e a s o n f o r t h i s i s t h e o v e r w h e l m i n g p r e d o m i n a n c e o f r e s e a r c h c o n d u c t e d i n t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m f r o m a q u a n t i t a t i v e p e r s p e c t i v e u s i n g e x p e r i m e n t a l o r q u a s i - e x p e r i m e n t a l methods. The a u t h o r d i d n o t f i n d a s i n g l e s t u d y t h a t was c o n d u c t e d u s i n g q u a l i t a t i v e r e s e a r c h methods. The q u a l i t a t i v e a p p r o a c h t o r e s e a r c h i s e m p l o y e d r e g u l a r l y i n s o c i o l o g y and a n t h r o p o l o g y ( F i l s t e a d , 1970; Hammersley & A t k i n s o n , 1983; B u r g e s s , 1 9 8 4 ) ; i t i s g a i n i n g a c c e p t a n c e i n t h e f i e l d o f m a r k e t i n g ( H i r s c h m a n , 1 9 8 6 ) ; and t h e r e i s an i n c r e a s i n g a w a r e n e s s o f i t s v a l u e i n e d u c a t i o n . ( B o g d a n & B i k l e n , 1982; LeCompte & G o e t z , 1982; R i s t , 1982; M i n n i s , 1985; F e t t e r m a n , 1 9 8 8 ) . I n f a c t , R i s t a r g u e s t h a t t h e "hegemony" o f t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m i n e d u c a t i o n r e s e a r c h i s q u i c k l y d i s s o l v i n g b e c a u s e o f i t s i n a b i l i t y t o a d d r e s s t h e process o f e d u c a t i o n , p a r t i c u l a r l y f r o m t h e p o i n t o f v i e w o f t h e l e a r n e r . The r e s e a r c h r e v i e w e d h e r e s u p p o r t s t h a t v i e w and s u g g e s t s a n o t h e r r e a s o n : t h e i n a b i l i t y o f t h e e x p e r i m e n t a l a p p r o a c h t o r e l a t e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 86 o utcomes t o p r o c e s s . R e s e a r c h has e x a m i n e d t h e e f f e c t o f d i f f e r e n t m e d i a v a r i a b l e s on s t u d e n t a c h i e v e m e n t ( w i t h l i m i t e d s u c c e s s ) , b u t no a t t e m p t has b e e n made t o r e l a t e t h a t a c h i e v e m e n t t o t h e p r o c e s s t h e l e a r n e r e n g a g e s i n t o l e a r n . To do t h a t r e q u i r e s a change i n p e r s p e c t i v e , one t h a t i s n o t r e a d i l y a f f o r d e d by t h e e x p e r i m e n t a l a p p r o a c h . To u n d e r s t a n d how l e a r n e r s i n t e r a c t w i t h t h e i r l e a r n i n g e n v i r o n m e n t r e q u i r e s an a p p r o a c h t h a t l o o k s a t t h e e n t i r e c o n t e x t o f l e a r n i n g f r o m t h e s u b j e c t s ' p o i n t o f v i e w . T h a t a p p r o a c h i s f o u n d i n t h e q u a l i t a t i v e m e t h o d o l o g i e s . Two more r e a s o n s a r e o f f e r e d i n s u p p o r t o f u s i n g t h e q u a l i t a t i v e a p p r o a c h : i t s a b i l i t y t o r e v e a l q u a l i t a t i v e d i f f e r e n c e s i n l e a r n i n g ( D a h l g r e n , 1984; E n t w i s t l e , 1984; M a r t o n , 1 9 8 8 ) ; and i t s use o f i n d u c t i v e r a t h e r t h a n d e d u c t i v e l o g i c ( F i l s t e a d , 1970; G l a s e r & S t r a u s s , 1970; W i l s o n , 1977) . One o f t h e m a j o r s h o r t c o m i n g s o f r e s e a r c h r e v i e w e d i n t h i s s t u d y has been t h e s u p e r f i c i a l i t y o f t h e a c h i e v e m e n t m e a s u r e s . V i r t u a l l y a l l o f them were p a p e r an d p e n c i l t e s t s e m p l o y i n g m u l t i p l e c h o i c e o r s h o r t a n s w e r q u e s t i o n s . R e s e a r c h w h i c h u s e s q u a l i t a t i v e methods t o a n a l y z e l e a r n i n g has r e v e a l e d i m p o r t a n t q u a l i t a t i v e d i f f e r e n c e s i n s t u d e n t u n d e r s t a n d i n g o f k e y c o n c e p t s i n d i f f e r e n t s u b j e c t a r e a s t h a t were n o t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 87 r e v e a l e d b y t r a d i t i o n a l q u a n t i t a t i v e t e s t s o f a c h i e v e m e n t . ( D a h l g r e n , 1984; E n t w i s t l e , 1984; M a r t o n , 1 9 8 8 ) . The f i n a l a d v a n t a g e o f t h e q u a l i t a t i v e a p p r o a c h l i e s i n i t s u s e o f i n d u c t i v e r a t h e r t h a n d e d u c t i v e r e a s o n i n g ( F i l s t e a d , 1970; G l a s e r & S t r a u s s , 1970; W i l s o n , 1977) . I n t h e h y p o t h e t i c o - d e d u c t i v e p a r a d i g m , t h e o r i e s a r e d e v e l o p e d , h y p o t h e s e s a r e f o r m u l a t e d and t h e n v a r i a b l e s a r e m a n i p u l a t e d i n an e x p e r i m e n t a l s e t t i n g i n an a t t e m p t t o t e s t t h e h y p o t h e s e s . F i r s t o f a l l t h i s assumes t h a t r e s e a r c h e r s know i n a d v a n c e what t h e c r i t i c a l v a r i a b l e s w i l l be, a n d s e c o n d l y , q u a l i t a t i v e r e s e a r c h e r s a r g u e , t h i s p r e o c c u p a t i o n w i t h a s p e c i f i c h y p o t h e s i s may r e s u l t i n i m p o r t a n t e v e n t s b e i n g m i s s e d o r i g n o r e d . ( D a l t o n , 1964; W i l s o n , 1977; B u r g e s s , 1 9 8 4 ) . These c r i t i c i s m s a r e p a r t i c u l a r l y r e l e v a n t t o t h e s t u d y o f l e a r n i n g (and more s o t o l e a r n i n g a t a d i s t a n c e ) where t h e r e a r e many c o m p l e x , i n t e r r e l a t e d a n d sometimes u n o b s e r v a b l e f a c t o r s . The i n d u c t i v e l o g i c o f t h e q u a l i t a t i v e a p p r o a c h u s e s d a t a c o l l e c t e d i n t h e n a t u r a l s e t t i n g t o generate h y p o t h e s e s , d e v e l o p t h e o r i e s and, i d e a l l y , t e s t t h e s e t h e o r i e s i n t h e same s e t t i n g . T h i s c y c l i c a l p r o c e s s r e s u l t s i n t h e o r i e s t h a t a r e " g r o u n d e d " i n t h e e m p i r i c a l w o r l d ( G l a s e r & S t r a u s s , 1970) . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 88 P u r p o s e The p u r p o s e o f t h e p r o p o s e d s t u d y w o u l d be t o e x a m i n e a n d d e s c r i b e t h e p r o c e s s e s and outcomes o f l e a r n i n g i n t h e d i s t a n c e e d u c a t i o n c o u r s e , Law for Teachers: Introduction to Legal Process. (Law 497) The u s e o f v i d e o t a p e d l e c t u r e s w o u l d be one o f t h e f o c i o f t h i s s t u d y , b u t o n l y one o f many. Two r e a s o n s a r e o f f e r e d f o r t h i s . F i r s t , r e s e a r c h t o d a t e h a s p r o d u c e d so few m e a n i n g f u l r e s u l t s t h a t i t i s n o t c l e a r what t o l o o k f o r i n t e r m s o f l e a r n e r r e s p o n s e s t o v i d e o t a p e s o r t e l e v i s i o n . S e c o n d , one o f t h e g o a l s o f t h e q u a l i t a t i v e a p p r o a c h i s t o examine a phenomenon i n i t s n a t u r a l s e t t i n g a n d i n t h e c o n t e x t o f i t s r e l a t i o n s h i p t o o t h e r phenomena. To i s o l a t e one a s p e c t ( v i d e o t a p e s ) o f d i s t a n c e e d u c a t i o n d e l i v e r y f r o m t h e o t h e r i n t e r - r e l a t e d a s p e c t s w o u l d n o t a c h i e v e t h i s g o a l . T h e r e f o r e , t h e p r o p o s e d s t u d y w o u l d be e x p l o r a t o r y i n n a t u r e and t h e u s e o f v i d e o t a p e s w o u l d be e x a m i n e d i n t h e c o n t e x t o f t h e c o m p l e t e c o u r s e . Thus p r o c e s s and o u t c o m e s , a n d f a c t o r s a f f e c t i n g them, w o u l d be e x a m i n e d as t h e y r e l a t e t o a l l components o f t h e c o u r s e : c o u r s e m a n u a l , a u d i o t a p e s , i n s t r u c t o r - s t u d e n t i n t e r a c t i o n by t e l e p h o n e , s t u d e n t t o s t u d e n t i n t e r a c t i o n , c o u r s e a s s i g n m e n t s and e x a m i n a t i o n s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 89 E x a m i n i n g t h e p r o c e s s e s a n d outcomes o f l e a r n i n g w o u l d i n v o l v e s e e k i n g a n s w e r s t o t h e f o l l o w i n g q u e s t i o n s : 1. How do t h e s t u d e n t s a p p r o a c h e a c h o f t h e compone n t s ; t h a t i s what methods o r s t r a t e g i e s do t h e y u s e t o l e a r n f r o m e a c h o f t h e components? 2. Do t h e s t u d e n t s u se d i f f e r e n t a p p r o a c h e s f o r d i f f e r e n t c o mponents? 3. What a r e s t u d e n t s ' g o a l s and m o t i v e s f o r t a k i n g t h i s c o u r s e ? 4. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s e g o a l s a n d m o t i v e s a n d t h e i r a p p r o a c h ? 5. What a r e t h e s t u d e n t s ' a t t i t u d e s t o w a r d s t h e c o u r s e a n d i t s i n d i v i d u a l c o mponents? 6. How w e l l do s t u d e n t s a c h i e v e b a s e d on a s s i g n m e n t a n d e x a m i n a t i o n s c o r e s ? 7. What does a q u a l i t a t i v e a n a l y s i s o f s t u d e n t s ' l e a r n i n g r e v e a l a b o u t t h e i r u n d e r s t a n d i n g o f k e y c o n c e p t s i n t h e c o u r s e ? 8. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s t u d e n t s ' u n d e r s t a n d i n g o f k e y c o n c e p t s , as r e v e a l e d by a q u a l i t a t i v e a n a l y s i s , a n d t h e i r a c h i e v e m e n t , a s d e t e r m i n e d by a s s i g n m e n t and e x a m i n a t i o n s c o r e s ? 9. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s t u d e n t s ' u n d e r s t a n d i n g o f k e y c o n c e p t s , as r e v e a l e d by a T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 90 q u a l i t a t i v e a n a l y s i s , and t h e p r o c e s s e s o f l e a r n i n g e n g a ged i n by t h e s t u d e n t s ? 10. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s t u d e n t s ' g o a l s and m o t i v e s f o r t a k i n g t h e c o u r s e and t h e i r u n d e r s t a n d i n g o f k e y c o n c e p t s as r e v e a l e d by a q u a l i t a t i v e a n a l y s i s ? As t h i s l i s t o f q u e s t i o n s r e v e a l s , t h i s w o u l d be a w i d e - r a n g i n g s t u d y . I t i s h o p e d t h a t by c a s t i n g a w i d e n e t , d i r e c t i o n w o u l d be p r o v i d e d t o p u r s u e some a s p e c t s i n more d e t a i l a t a l a t e r d a t e u s i n g t h e most a p p r o p r i a t e q u a l i t a t i v e a nd q u a n t i t a t i v e m e t h o d o l o g i e s . D e s i g n The q u a l i t a t i v e a p p r o a c h has b een a p p l i e d i n d i v e r s e f i e l d s , i n many d i f f e r e n t ways, a n d t o a w i d e r a n g e o f r e s e a r c h q u e s t i o n s ( J a c o b , 1987, F e t t e r m a n , 1 9 8 8 ) . D e s p i t e t h i s d i v e r s i t y o f a p p l i c a t i o n , f o r t h e most p a r t , r e s e a r c h e r s a g r e e on t h e f u n d a m e n t a l s o f t h e a p p r o a c h : i t s e p i s t e m o l o g i c a l f o u n d a t i o n s , and i t s methods f o r d a t a c o l l e c t i o n and d a t a a n a l y s i s . However t h e r e i s one a r e a where i n t e r p r e t a t i o n s and o p i n i o n s v a r y : r e s e a r c h d e s i g n . The a r e a s o f a greement have been d i s c u s s e d i n C h a p t e r I . They w i l l be r e v i e w e d b r i e f l y h e r e f o l l o w e d by a d i s c u s s i o n o f t h e d i f f e r e n t a p p r o a c h e s t o r e s e a r c h d e s i g n w i t h a r a t i o n a l e f o r t h e a p p r o a c h c h o s e n . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 91 A t t h e h e a r t o f t h e q u a l i t a t i v e a p p r o a c h i s i t s p h i l o s o p h y o f k n o w l e d g e . I t r e j e c t s t h e p o s i t i v i s t v i e w t h a t an o b j e c t i v e t r u t h c a n be d i s c o v e r e d and i n s t e a d m a i n t a i n s t h a t , t o a l a r g e e x t e n t , k n o w l e d g e and r e a l i t y a r e s o c i a l l y c o n s t r u c t e d and a r e t h e r e f o r e r e l a t i v e ( R i s t , 1982; S m i t h , 1983; F e t t e r m a n , 1 9 8 8 ) . To p r o p e r l y u n d e r s t a n d how p e o p l e c o n s t r u c t r e a l i t y , t h e r e s e a r c h e r must s e e k t o u n d e r s t a n d e v e n t s f r o m t h e p e r s p e c t i v e o f t h e p e o p l e c o n s t r u c t i n g i t . The b a s i c d a t a g a t h e r i n g t e c h n i q u e s i n t h e q u a l i t a t i v e a p p r o a c h a r e p a r t i c i p a n t o b s e r v a t i o n , i n - d e p t h i n t e r v i e w i n g , and d o c u m e n t a r y a n a l y s i s . I n t h e t h i s s t u d y o n l y t h e f i r s t two w o u l d be u s e d . T h e r e i s no s t a n d a r d method o f u s i n g t h e s e t e c h n i q u e s ; i t depends on t h e s i t u a t i o n . F o r e x a m p l e , p a r t i c i p a n t o b s e r v a t i o n c a n r a n g e f r o m c o m p l e t e p a r t i c i p a t i o n where t h e r e s e a r c h e r becomes a member o f t h e g r o u p u n d e r s t u d y and t a k e s p a r t i n a l l o f i t s a c t i v i t i e s , t o c o m p l e t e o b s e r v e r , where t h e r e s e a r c h e r s e t s h i m s e l f a p a r t f r o m t h e g r o u p u n d e r s t u d y ( J a c o b , 1987) . I n - d e p t h i n t e r v i e w i n g c a n be h i g h l y s t r u c t u r e d w i t h p r e - d e t e r m i n e d q u e s t i o n s ; s e m i - s t r u c t u r e d w i t h g u i d i n g q u e s t i o n s o n l y o r c o m p l e t e l y o pen-ended w i t h o n l y a s t a r t i n g q u e s t i o n . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 92 D a t a a n a l y s i s i n v o l v e s c l a s s i f y i n g d a t a i n t o a scheme t h a t a l l o w s themes, c o n c e p t s and e v e n t u a l l y h y p o t h e s e s t o emerge. R e s e a r c h e r s u s e d i f f e r e n t methods t o a c c o m p l i s h t h i s , however L a z a r s f e l d & B a r t o n (1971) a r g u e t h a t any scheme s h o u l d have t h e f o l l o w i n g a t t r i b u t e s : i t s h o u l d be a r t i c u l a t e d ( i . e . , moves f r o m t h e g e n e r a l t o t h e s p e c i f i c ) ; l o g i c a l l y c o r r e c t ( i . e . , t h e c a t e g o r i e s a r e e x h a u s t i v e and m u t u a l l y e x c l u s i v e ) ; a nd i t s h o u l d be a d a p t e d t o t h e s t r u c t u r e o f t h e s i t u a t i o n . The c o n c e p t s , and h y p o t h e s e s t h a t emerge f r o m t h i s c l a s s i f i c a t i o n w i l l g u i d e f u r t h e r o b s e r v a t i o n s t o " t e s t " t h e s e h y p o t h e s e s . I f d i s c o n f i r m i n g e v i d e n c e i s f o u n d t h e h y p o t h e s e s a r e r e v i s e d and t h e p r o c e s s i s r e p e a t e d . As t h i s p r o c e s s i n d i c a t e s , t h e s t a g e s i n q u a l i t a t i v e r e s e a r c h a r e n o t c l e a r l y d e f i n e d and s e l f - c o n t a i n e d ; t h e y a r e h i g h l y i n t e r d e p e n d e n t and i n t e g r a t e d . D a t a c o l l e c t i o n , d a t a a n a l y s i s and h y p o t h e s i z i n g a r e c o n c u r r e n t and i t e r a t i v e p r o c e d u r e s t h a t d r i v e e a c h o t h e r and d e t e r m i n e t h e d i r e c t i o n o f t h e r e s e a r c h . No m a t t e r how w e l l - p l a n n e d t h e r e s e a r c h i s , once t h e f i e l d w o r k b e g i n s , many m i n o r o r m a j o r m o d i f i c a t i o n s may be n e c e s s a r y . I n a s e n s e q u a l i t a t i v e r e s e a r c h e r s a g r e e on how t o p r o c e e d once r e s e a r c h b e g i n s , b u t t h e y c a n n o t a g r e e on T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 93 how t o g e t s t a r t e d ; t h a t i s , how much r e s e a r c h d e s i g n i s n e c e s s a r y ? The n a t u r e o f t h e q u a l i t a t i v e r e s e a r c h p r o c e s s seems t o b e g an u n p l a n n e d and h a p h a z a r d a p p r o a c h . As Hammersley & A t k i n s o n (1983) p u t i t , "At f i r s t b l u s h . . . [ i t ] i s d e c e p t i v e l y s i m p l e : 'anyone c a n do i t ' , a p p a r e n t l y . I n d e e d some a u t h o r s have r e p o r t e d b e i n g g i v e n l i t t l e more r e s e a r c h a d v i c e t h a n j u s t t h a t b e f o r e t h e y s e t o u t on t h e i r f i e l d w o r k . " (p. 2 7 ) . I f one t a k e s t o h e a r t t h e i n d u c t i v e n a t u r e o f t h e q u a l i t a t i v e p r o c e s s , t h e n e e d t o s u s p e n d judgment a n d t o l e t h y p o t h e s e s emerge f r o m t h e d a t a , i t i s e a s y t o r a t i o n a l i z e a l a c k o f p l a n n i n g and r e s e a r c h d e s i g n . However, e v e n t h e most " o r t h o d o x " q u a l i t a t i v e r e s e a r c h e r s a d m i t t h e n e e d f o r some p r e - f i e l d w o r k p l a n n i n g . The d i s a g r e e m e n t i s o v e r t h e e x t e n t o f t h i s p l a n n i n g . A t one e x t r e m e t h e r e a r e t h o s e who s u g g e s t t h a t q u a l i t a t i v e r e s e a r c h s h o u l d b e g i n w i t h n o t h i n g more t h a n a g e n e r a l t o p i c o r i s s u e and t h a t an e x p l i c i t s t a t e m e n t o f t h e p r o b l e m o r f o r m u l a t i o n o f h y p o t h e s e s s h o u l d n o t b e g i n u n t i l some i n i t i a l f i e l d o b s e r v a t i o n s have been made. (Bogdan & B i k l e n , 1982; H i r s c h m a n , 1 9 8 6 ) . They a r g u e t h a t t h e r e s e a r c h e r must a p p r o a c h t h e phenomenon u n d e r i n v e s t i g a t i o n w i t h an open m i n d and w i t h o u t i m p o s i n g p r e c o n c e i v e d i d e a s o r t h e o r e t i c a l c o n s t r u c t s on T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 94 t h e s i t u a t i o n . F u r t h e r m o r e t h e y s u g g e s t t h a t b e c a u s e t h e p o i n t o f q u a l i t a t i v e r e s e a r c h i s t o l o o k a t t h i n g s f r o m s u b j e c t ' s p o i n t v i e w , t h e r e s e a r c h e r w i l l n o t know what t o l o o k f o r u n t i l he o r she h a s s p e n t t i m e i n t h e f i e l d as a p a r t i c i p a n t o b s e r v e r . W h i l e few, i f any, q u a l i t a t i v e r e s e a r c h e r s s u g g e s t t h a t e x p l i c i t h y p o t h e s e s must be s t a t e d i n a d v a n c e a n d t h a t t h e r e s e a r c h must be d e s i g n e d t o t e s t t h e s e h y p o t h e s e s , some a c c e p t t h i s as a p o s s i b l e a p p r o a c h . Hammersley & A t k i n s o n (1983) s u g g e s t q u a l i t a t i v e r e s e a r c h c a n be u s e d t o t e s t t h e o r y w h i c h w o u l d n e c e s s i t a t e b e g i n n i n g w i t h e x p l i c i t h y p o t h e s e s . They a d m i t t h i s w o u l d n o t be e a s y b e c a u s e o f t h e i n a b i l i t y t o c o n t r o l v a r i a b l e s b u t t h e y s a y t h a t what w o u l d be l o s t i n t h i s r e s p e c t w o u l d be g a i n e d i n t e r m s o f e c o l o g i c a l v a l i d i t y . L a z a r s f e l d & B a r t o n (1971) m a i n t a i n t h a t i f q u a l i t a t i v e r e s e a r c h i s n o t e x p l o r a t o r y , t h e n c l e a r , t h e o r e t i c a l l y d e r i v e d c a t e g o r i e s o f d a t a n e e d t o be f o r m u l a t e d i n a d v a n c e . T h i s i m p l i e s t h a t , a t t h e v e r y l e a s t , r e s e a r c h w o u l d have t o b e g i n w i t h a t h e o r e t i c a l f r a m e w o r k , i f n o t e x p l i c i t h y p o t h e s e s . T h ese two e x t r e m e s a r e t h e e x c e p t i o n s ; most q u a l i t a t i v e r e s e a r c h e r s a r e s i t u a t e d somewhere i n b e t w e e n . They do n o t b e l i e v e i n s t a t i n g h y p o t h e s e s b u t t h e y b e l i e v e i n h a v i n g a c l e a r p l a n a n d an a w a r e n e s s o f T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 95 t h e c o n c e p t u a l a nd t h e o r e t i c a l i s s u e s t h a t may be i n v o l v e d . D a l t o n (1964) makes t h e c a s e a g a i n s t s t a t i n g h y p o t h e s e s : " H a v i n g once made s u c h a s t a t e m e n t , one more e a s i l y o v e r l o o k s n e g a t i v e f i n d i n g s , o r , on h a v i n g them p o i n t e d o u t , one's e m o t i o n a l f r e i g h t o f t e n l i m i t s c r e a t i v i t y t o i n g e n i o u s c o u n t e r a r g u m e n t s , as i n G o e t h e ' s l o n g r e s e a r c h a nd b r i l l i a n t b u t empty t h e o r i z i n g i n o p p o s i t i o n t o Newton's s u p e r i o r h y p o t h e s i s on t h e n a t u r e o f c o l o r " (p. 5 4 ) . M a l i n o w s k i ( c i t e d i n Hammersley & A t k i n s o n , 1983) makes an e l o q u e n t d e f e n c e o f t h e n e e d f o r p l a n n i n g by d i s t i n g u i s h i n g b e t ween p r e c o n c e i v e d i d e a s a n d " f o r e s h a d o w e d p r o b l e m s " : Good t r a i n i n g i n t h e o r y , and a c q u a i n t a n c e w i t h i t s l a t e s t r e s u l t s i s n o t i d e n t i c a l w i t h b e i n g b u r d e n e d w i t h " p r e c o n c e i v e d i d e a s " . I f a man s e t s o u t on an e x p e d i t i o n , d e t e r m i n e d t o p r o v e c e r t a i n h y p o t h e s e s , i f he i s i n c a p a b l e o f c h a n g i n g h i s v i e w s c o n s t a n t l y a n d c a s t i n g them o f f u n g r u d g i n g l y u n d e r t h e p r e s s u r e o f e v i d e n c e , n e e d l e s s t o s a y h i s work w i l l be w o r t h l e s s . B u t t h e more p r o b l e m s he b r i n g s w i t h h i m i n t o t h e f i e l d , t h e more he i s i n t h e h a b i t o f m o u l d i n g h i s t h e o r i e s a c c o r d i n g t o f a c t s , a n d o f s e e i n g f a c t s i n t h e i r b e a r i n g upon t h e o r y , t h e b e t t e r he i s e q u i p p e d f o r t h e work. P r e c o n c e i v e d i d e a s a r e p e r n i c i o u s i n any s c i e n t i f i c work, b u t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 96 f o r e s h a d o w e d p r o b l e m s a r e t h e m a i n endowment o f a s c i e n t i f i c t h i n k e r , and t h e s e p r o b l e m s a r e f i r s t r e v e a l e d t o t h e o b s e r v e r by t h i s t h e o r e t i c a l s t u d i e s (p. 29) . B u r g e s s (1984) s u g g e s t s t h e r e a r e f i v e a s p e c t s t h a t n e e d t o be a d d r e s s e d i n t h i s " m i d d l e g r o u n d " r e s e a r c h d e s i g n : 1. a b r o a d i n d i c a t i o n o f t h e t h e o r e t i c a l c o n c e p t s t h a t a r e t o be u s e d ; t h a t i s a b a s i c f ramework w i t h i n w h i c h r e s e a r c h q u e s t i o n s a r e t o be g e n e r a t e d . 2. an i n d i c a t i o n o f t h e k i n d s o f q u e s t i o n s t h a t n e e d t o be a d d r e s s e d and t h e k i n d s o f d a t a t h a t a r e l i k e l y t o be n e e d e d . 3. an i n d i c a t i o n o f how t h e d a t a w i l l be a n a l y z e d and r e p o r t e d . 4. a c l e a r i n d i c a t i o n o f t h e f i e l d methods t h a t a r e t o be u s e d and t h e way i n w h i c h t h e s e may be c o m p l emented by o t h e r r e s e a r c h s t r a t e g i e s . 5. a r e s e a r c h t i m e t a b l e t o i n d i c a t e a t i m e b u d g e t f o r t h e c o l l e c t i o n a nd a n a l y s i s o f d a t a t o g e t h e r w i t h s u f f i c i e n t t i m e f o r r e p o r t w r i t i n g (p. 3 7 ) . T h i s " m i d d l e g r o u n d " a p p r o a c h t o r e s e a r c h d e s i g n i s s u g g e s t e d f o r t h e p r o p o s e d s t u d y f o r t h r e e r e a s o n s . F i r s t o f a l l , d e s p i t e i t s s p e c i f i c i t y , i t s t i l l r e s p e c t s t h e u n d e r l y i n g p h i l o s o p h y o f t h e q u a l i t a t i v e a p p r o a c h T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 97 w h i c h i s t o exam i n e t h e phenomenon f r o m t h e p e r s p e c t i v e o f t h e s u b j e c t a n d n o t t o impose t h e p r e c o n c e i v e d v i e w s and c a t e g o r i e s o f t h e r e s e a r c h e r . S e c o n d l y , t h i s a p p r o a c h r e c o g n i z e s t h a t i t i s i m p o s s i b l e t o c o m p l e t e l y i g n o r e p r e c o n c e p t i o n s . I t i s more h o n e s t t o a d m i t them i n a d v a n c e i n t h e f o r m o f a b r o a d f r a m e w o r k a n d i n t e r m s o f g e n e r a l q u e s t i o n s a n d i t i s p r o b a b l y more h e l p f u l b e c a u s e once a d m i t t e d t h e y c a n be more e a s i l y i g n o r e d , s u s p e n d e d o r m o d i f i e d i f t h e f i e l d o b s e r v a t i o n s make t h a t n e c e s s a r y . The f i n a l r e a s o n i n f a v o r o f a d o p t i n g t h i s m i d d l e a p p r o a c h t o r e s e a r c h d e s i g n i s t h a t i t p r o v i d e s f o c u s . I n t h e o r y i t sounds l a u d a b l e t o a p p r o a c h an i n v e s t i g a t i o n w i t h a c o m p l e t e l y open m i n d a n d no p r e c o n c e p t i o n s , b u t i n p r a c t i c e we a r e a l w a y s m a k i n g d e c i s i o n s a b o u t what t o o b s e r v e a n d what n o t t o o b s e r v e . I f t h i s were n o t done we c o u l d n o t p o s s i b l y make s e n s e o f t h e o v e r w h e l m i n g amount o f d a t a t o w h i c h we a r e e x p o s e d . By h a v i n g a g e n e r a l f ramework o u r d e c i s i o n s a b o u t what t o o b s e r v e a r e a t l e a s t b a s e d on s o m e t h i n g b e s i d e s p u r e whim o r c h a n c e . I n t h e c a s e o f t h e p r o p o s e d s t u d y , t h i s i s p a r t i c u l a r l y i m p o r t a n t b e c a u s e most o f t h e d a t a w o u l d be g a t h e r e d v i a i n - d e p t h i n t e r v i e w s . E ven a t t h e open-ended e x t r e m e o f t h e i n t e r v i e w t e c h n i q u e ( n o t p r o p o s e d f o r t h i s s t u d y ) , t h e r e s e a r c h e r must b e g i n w i t h a p r e - d e t e r m i n e d q u e s t i o n . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 98 Of c o u r s e , no m a t t e r how d e t a i l e d t h e r e s e a r c h d e s i g n , i t does n o t p r e c l u d e m o d i f i c a t i o n s a f t e r t h e d a t a c o l l e c t i o n b e g i n s . One o f t h e u n i q u e f e a t u r e s o f t h e q u a l i t a t i v e a p p r o a c h i s i t s f l e x i b i l i t y . I t i s c o n s t a n t l y b e i n g a d a p t e d t o meet t h e needs o f t h e s i t u a t i o n u n d e r i n v e s t i g a t i o n . W h i l e " e x p e r i m e n t a l r e s e a r c h e r s hope t o f i n d d a t a t o m a t c h a t h e o r y ; e t h n o g r a p h e r s hope t o f i n d a t h e o r y t h a t e x p l a i n s t h e i r d a t a " (LeCompte & G o e t z , 1982, pp. 3 3 - 3 4 ) . Thus a w e l l - p l a n n e d s t u d y a l o n g t h e l i n e s s u g g e s t e d by B u r g e s s (1984) p r o v i d e s a f i r m f o u n d a t i o n on w h i c h t o b e g i n d a t a c o l l e c t i o n , however t h e u n p r e d i c t a b l e e v e n t s w h i c h u n f o l d i n t h e f i e l d s h o u l d u l t i m a t e l y d e t e r m i n e t h e f u t u r e d i r e c t i o n o f t h e i n v e s t i g a t i o n . S e t t i n g and C o n t e x t Law for Teachers: Introduction to Legal Process i s a c o u r s e d e s i g n e d t o p r o v i d e h i g h s c h o o l t e a c h e r s o f Law a n d L a w - r e l a t e d c o u r s e s w i t h a b a c k g r o u n d i n t h e c o n s t i t u t i o n a l , c r i m i n a l , c i v i l a n d a d m i n i s t r a t i v e l a w o f Canada. The c o u r s e d e a l s w i t h t h e o r i g i n s and m e a n i n g s o f l a w , t h e d i f f e r e n t p h i l o s o p h i e s o f l a w and t h e m a k i n g and a p p l i c a t i o n o f l a w i n Canada. The c o u r s e c o n s i s t s o f a s t u d e n t m a n u a l , e i g h t 30-50 m i n u t e v i d e o t a p e d l e c t u r e s , f o u r 30-50 m i n u t e a u d i o t a p e d l e c t u r e s ; a nd f o u r , one h o u r a u d i o T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 99 t e l e c o n f e r e n c e s . A s s e s s m e n t c o n s i s t s o f 4 s h o r t e s s a y s and a f i n a l e x a m i n a t i o n . The c o u r s e m anual i s d i v i d e d i n t o 12 l e s s o n s . E a c h c o n t a i n s a commentary w r i t t e n by t h e c o u r s e a u t h o r and r e a d i n g s s e l e c t e d f r o m l a w a n d o t h e r j o u r n a l s , b o o k s a n d n e w s p a p e r s . The v i d e o a n d a u d i o t a p e d l e c t u r e s s e r v e t o summarize and s y n t h e s i z e t h e v a r i o u s r e a d i n g s i n t h e c o u r s e m a n u a l . The a u d i o t e l e c o n f e r e n c e s a r e d e s i g n e d t o g i v e s t u d e n t s an o p p o r t u n i t y t o d i s c u s s some o f t h e i s s u e s and c o n c e p t s o f t h e c o u r s e . I n t h i s s e n s e t h e y a r e somewhat a n a l o g o u s t o a f a c e - t o - f a c e s e m i n a r . The s t u d e n t s a r e a l s o a b l e t o c o n s u l t t h e c o u r s e t u t o r i n d i v i d u a l l y by phone a t c e r t a i n h o u r s o f t h e week. The c o u r s e i s o f f e r e d by d i s t a n c e e d u c a t i o n f o r g r o u p s t u d y . T h i s means t h a t g r o u p s o f s i x o r more s t u d e n t s meet on a w e e k l y b a s i s t o w a t c h and d i s c u s s t h e v i d e o t a p e d l e c t u r e s . The s t u d e n t s a l s o meet i n t h e same g r o u p s t o t a k e p a r t i n t h e a u d i o t e l e c o n f e r e n c e s . The s t u d e n t s engage i n t h e o t h e r l e a r n i n g a c t i v i t i e s on t h e i r own. D a t a C o l l e c t i o n S e v e r a l q u a l i t a t i v e d a t a c o l l e c t i o n methods w o u l d be u s e d i n t h i s s t u d y . They i n c l u d e p a r t i c i p a n t o b s e r v a t i o n , s e m i - s t r u c t u r e d i n t e r v i e w s , and a g r o u p i n t e r v i e w . I n a d d i t i o n , q u a n t i t a t i v e r e c o r d s s u c h as T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 100 e x a m i n a t i o n and a s s i g n m e n t s c o r e s w o u l d be u s e d . The n a t u r e o f d i s t a n c e e d u c a t i o n means t h a t most o f t h e l e a r n i n g a c t i v i t i e s t a k e p l a c e p r i v a t e l y . T h e r e f o r e t h e most f r e q u e n t l y u s e d d a t a c o l l e c t i o n method w o u l d be t h e s e m i - s t r u c t u r e d i n t e r v i e w b e c a u s e d i r e c t o b s e r v a t i o n w o u l d u s u a l l y be i m p r a c t i c a l . T h i s t y p e o f i n t e r v i e w i n g i s t i m e c o n s u m i n g t o c o n d u c t and e v e n more t i m e c o n s u m i n g t o a n a l y z e . T h e r e f o r e i t i s p r o p o s e d t h a t a random s a m p l e o f 50% o f t h e s t u d e n t s be u s e d f o r t h e i n t e r v i e w s . S t u d e n t s w o u l d be a s k e d t o v o l u n t e e r f o r t h e s t u d y and t h e s ample w o u l d be s e l e c t e d f r o m t h o s e v o l u n t e e r i n g . Of t h e 10 r e s e a r c h q u e s t i o n s i d e n t i f i e d e a r l i e r , f o u r w o u l d i n v o l v e d a t a c o l l e c t i o n a nd t h e r e m a i n i n g s e v e n w o u l d i n v o l v e t h e a n a l y s i s o f t h a t d a t a . The d a t a c o l l e c t i o n t e c h n i q u e s r e q u i r e d t o a nswer t h o s e f i r s t f o u r q u e s t i o n s w i l l now be d i s c u s s e d . 1. How do t h e s t u d e n t s a p p r o a c h e a c h o f t h e c o m p o n e n t s ; t h a t i s , what methods o r s t r a t e g i e s do t h e y u s e t o l e a r n f r o m e a c h o f t h e c omponents.? W i t h t h e e x c e p t i o n o f t h e g r o u p m e e t i n g s t o w a t c h t h e v i d e o t a p e s a n d t a k e p a r t i n t h e a u d i o t e l e c o n f e r e n c e s , d a t a c o l l e c t i o n h e r e w o u l d i n v o l v e s e m i - s t r u c t u r e d i n t e r v i e w s . These i n t e r v i e w s w o u l d be c o n d u c t e d a t t h e c o n c l u s i o n o f t h e c o u r s e and w o u l d be T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 101 b a s e d on t h e m e t h o d o l o g y u s e d by r e s e a r c h c o n d u c t e d i n t h e p h e n o m e n o g r a p h i c t r a d i t i o n ( M a r t o n & S a l j o , 1984; M a r t o n , 1 9 8 8 ) . The q u e s t i o n s a s k e d a r e d e s i g n e d t o e l i c i t how t h e s t u d e n t s t a c k l e d t h e p a r t i c u l a r l e a r n i n g t a s k ; f o r e x a m p l e , r e a d i n g t h e c o u r s e m a n u a l , w a t c h i n g t h e v i d e o t a p e s , l i s t e n i n g t o t h e a u d i o t a p e s . S t u d e n t s w o u l d be a s k e d q u e s t i o n s s u c h a s : D e s c r i b e how y o u went a b o u t r e a d i n g y o u r l e s s o n m a t e r i a l ? D i d y ou s t a r t a t t h e b e g i n n i n g w i t h t h e o b j e c t i v e s and c o n t i n u e r e a d i n g t h r o u g h t o t h e end o r d i d you use a n o t h e r a p p r o a c h s u c h as s k i m m i n g t h r o u g h a n d t h e n r e t u r n i n g t o r e a d i n d e t a i l ? What were you f o c u s s i n g on when you d i d y o u r r e a d i n g s ( o r l i s t e n e d t o t h e a u d i o t a p e s e t c . ) ? Was t h e r e a n y t h i n g i n t h e d e s i g n o f t h e c o u r s e m a n u a l ( v i d e o t a p e s , a u d i o t a p e s e t c . ) t h a t c a u s e d p r o b l e m s f o r you? D i d y ou do t h e l e a r n i n g a c t i v i t i e s i n t h e o r d e r p r e s c r i b e d ? A l l q u e s t i o n s a s k e d i n e a c h i n t e r v i e w w o u l d n o t be d e t a i l e d i n a d v a n c e . However i n i t i a l q u e s t i o n s f o r e a c h a r e a o f i n v e s t i g a t i o n w o u l d be d e t a i l e d a n d f o l l o w - u p q u e s t i o n s w o u l d be d e t e r m i n e d by t h e r e s p o n s e s g i v e n . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 102 Some d a t a w o u l d be c o l l e c t e d f o r t h i s f i r s t q u e s t i o n t h r o u g h t h e u s e o f p a r t i c i p a n t o b s e r v a t i o n . T h i s w o u l d t a k e p l a c e a t t h e v i d e o s t u d y g r o u p m e e t i n g s a n d a t t h e a u d i o t e l e c o n f e r e n c e m e e t i n g s . I t i s p r o p o s e d t h a t a l l f o u r a u d i o t e l e c o n f e r e n c e s a n d a l l e i g h t v i d e o s t u d y g r o u p m e e t i n g s be o b s e r v e d . W h i l e t h i s w o u l d i n v o l v e a c o n s i d e r a b l e i n v e s t m e n t o f t i m e , i t i s f e l t t h a t t h i s w o u l d be t h e o n l y way o f o b t a i n i n g r e p r e s e n t a t i v e d a t a b e c a u s e a c t i v i t i e s and i n t e r a c t i o n s may v a r y d e p e n d i n g on t h e t o p i c u n d e r d i s c u s s i o n . I t w o u l d be p o s s i b l e t o l i m i t t h e s e o b s e r v a t i o n s i f i t was f o u n d t h a t a f t e r s e v e r a l s e s s i o n s no new d a t a was b e i n g g a t h e r e d . P a r t i c i p a t i o n by t h e i n v e s t i g a t o r w o u l d be k e p t t o a minimum. T h i s s t u d y w o u l d n o t be s o c i o l o g i c a l o r a n t h r o p o l o g i c a l i n n a t u r e so i t i s n o t f e l t t h a t t h o r o u g h p a r t i c i p a t i o n by t h e i n v e s t i g a t o r w o u l d be n e c e s s a r y o r b e n e f i c i a l . The p u r p o s e o f t h e o b s e r v a t i o n s w o u l d be t o s t u d y how t h e s t u d e n t s i n t e r a c t w i t h and use t h e v i d e o t a p e s , t h e a u d i o t e l e c o n f e r e n c e s , e a c h o t h e r and t h e t u t o r . I n p a r t i c i p a n t o b s e r v a t i o n , t h e i n v e s t i g a t o r k e e p s a w r i t t e n r e c o r d o f a l l t h e a c t i v i t i e s t h a t a r e p e r c e i v e d t o be r e l e v a n t t o t h e q u e s t i o n s u n d e r i n v e s t i g a t i o n . T h i s s h o u l d be as c o n c r e t e as p o s s i b l e a n d i n f e r e n c e s s h o u l d be k e p t t o a l o w l e v e l ( J a c o b , 1 9 8 7 ) . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 103 2. What a r e t h e s t u d e n t s ' g o a l s a nd m o t i v e s f o r t a k i n g t h i s c o u r s e ? S e m i - s t r u c t u r e d i n t e r v i e w s w o u l d be u s e d h e r e as w e l l . T h ese i n t e r v i e w s w o u l d a l s o b e g i n w i t h s e v e r a l p r e - d e t e r m i n e d q u e s t i o n s , b u t f o l l o w - u p q u e s t i o n s w o u l d be d e t e r m i n e d by t h e r e s p o n s e s . These i n t e r v i e w s w o u l d be c o n d u c t e d a t t h e b e g i n n i n g o f t h e c o u r s e a f t e r t h e f i r s t l e s s o n . 3. What a r e t h e s t u d e n t s ' a t t i t u d e s t o w a r d s t h e c o u r s e a nd i t s i n d i v i d u a l c o mponents? D a t a f o r t h i s q u e s t i o n w o u l d be c o l l e c t e d f r o m s e m i - s t r u c t u r e d i n t e r v i e w s , g r o u p m e e t i n g s , a nd t o a l i m i t e d e x t e n t f r o m p a r t i c i p a n t o b s e r v a t i o n . The s e m i - s t r u c t u r e d i n t e r v i e w s w o u l d be c o n d u c t e d a t t h e c o n c l u s i o n o f t h e c o u r s e and w o u l d f o l l o w t h e same f o r m a t as t h e o t h e r i n t e r v i e w s w i t h s e v e r a l p r e - a r r a n g e d q u e s t i o n s a n d a f l e x i b l e f o l l o w - u p p r o c e d u r e . One m e e t i n g w o u l d be h e l d w i t h e a c h g r o u p t o w a r d s t h e e nd o f t h e c o u r s e as a means o f a c q u i r i n g f e e d b a c k f r o m a l l o f t h e s t u d e n t s . Some r e s e a r c h e r s have f o u n d t h a t t h e d y n a m i c o f t h e g r o u p m e e t i n g r e s u l t s i n t h e emergence o f i d e a s and i s s u e s t h a t do n o t a l w a y s a p p e a r i n i n d i v i d u a l i n t e r v i e w s ( W a l k e r , 1 9 8 5 ) . The g r o u p m e e t i n g s may t h e n p r o v i d e " r i c h e r " f e e d b a c k f r o m t h e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 104 s t u d e n t s w h i l e a l l o w i n g f o r c o n f i r m a t i o n o f t h e d a t a g a t h e r e d f r o m t h e s u b s e q u e n t i n t e r v i e w s . Some d a t a may be g a t h e r e d f o r t h i s g u e s t i o n i n t h e o b s e r v a t i o n o f t h e v i d e o s t u d y g r o u p a nd a u d i o t e l e c o n f e r e n c e m e e t i n g s . T h i s w o u l d r e q u i r e d r a w i n g i n f e r e n c e s f r o m t h e o b s e r v e d b e h a v i o r o f t h e s t u d e n t s . 4. How w e l l do s t u d e n t s a c h i e v e b a s e d on a s s i g n m e n t a n d e x a m i n a t i o n s c o r e s ? F i n a l c o u r s e g r a d e s w o u l d be u s e d . 5. What does a q u a l i t a t i v e a n a l y s i s o f s t u d e n t s ' l e a r n i n g r e v e a l a b o u t t h e i r u n d e r s t a n d i n g o f k e y c o n c e p t s i n t h e c o u r s e . W h i l e t h i s q u e s t i o n d e a l s w i t h a n a l y s i s , t h e d a t a must a l s o be c o l l e c t e d . T h i s w o u l d be done u s i n g t h e p h e n o m e n o g r a p h i c a p p r o a c h o f M a r t o n (1988) w h i c h i n v o l v e s c o n d u c t i n g s e m i - s t r u c t u r e d i n t e r v i e w s w i t h s t u d e n t s a b o u t t h e i r u n d e r s t a n d i n g o f t h e k e y c o n c e p t s o f t h e s u b j e c t u n d e r i n v e s t i g a t i o n . I n t h e c a s e o f t h i s s t u d y t h e i n t e r v i e w s w o u l d d e a l w i t h g e n e r a l t h e o r e t i c a l a n d p h i l o s o p h i c a l q u e s t i o n s o f l a w s u c h a s : Who makes l a w ? What i s t h e r o l e o f j u d g e s , l e g i s l a t o r s , l a w y e r s ? What i s t h e p u r p o s e o f a c o n s t i t u t i o n ? e t c . Open q u e s t i o n s a r e u s e d t h a t a l l o w t h e s u b j e c t s t o frame t h e i r r e s p o n s e s i n a f a s h i o n t h a t i s most a p p r o p r i a t e f o r them. The i n t e r v i e w s b e g i n w i t h s e t q u e s t i o n s , b u t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 105 t h e c o u r s e o f t h e i n t e r v i e w may v a r y . The p u r p o s e i s t o " d i s c o v e r t h e d i f f e r e n t ways t h a t p e o p l e e x p e r i e n c e o r c o n c e p t u a l i z e a c e r t a i n phenomenon" ( M a r t o n , 1988, p. 1 9 8 ) . These i n t e r v i e w s w o u l d a l s o be c o n d u c t e d a t t h e c o n c l u s i o n o f t h e c o u r s e . D a t a A n a l y s i s I n q u a l i t a t i v e r e s e a r c h , d a t a c o l l e c t i o n a n d d a t a a n a l y s i s a r e n o t two d i s t i n c t s t e p s . D e p e n d i n g on t h e n a t u r e o f t h e s t u d y , q u a l i t a t i v e r e s e a r c h e r s o f t e n c a r r y o u t d a t a a n a l y s i s and c o l l e c t i o n c o n c u r r e n t l y . T h i s o n g o i n g d a t a a n a l y s i s a l l o w s t h e r e s e a r c h e r t o s h a r p e n t h e f o c u s o f t h e s t u d y , t o p u r s u e l e a d s , and e v e n r e - d i r e c t t h e s t u d y . F o r p r a c t i c a l r e a s o n s , t h i s s t u d y w o u l d n o t be a b l e t o t a k e s i g n i f i c a n t a d v a n t a g e o f o n g o i n g a n a l y s i s . The s u b j e c t s l i v e i n many d i f f e r e n t p a r t s o f t h e p r o v i n c e . I f an o n g o i n g a n a l y s i s r e v e a l e d a n e e d f o r f o l l o w - u p i n t e r v i e w s t h e y w o u l d be d i f f i c u l t t o a r r a n g e . T h e r e f o r e , i t i s e x p e c t e d t h a t most o f t h e d a t a a n a l y s i s w o u l d be p e r f o r m e d a f t e r t h e d a t a has been c o l l e c t e d . F u r t h e r m o r e , b e c a u s e t h e s t u d y w o u l d be e x p l o r a t o r y , t h e r e w o u l d be no n e e d t o " t e s t " h y p o t h e s e s t h a t m i g h t emerge f r o m an o n g o i n g a n a l y s i s o f t h e d a t a . However, o n g o i n g d a t a a n a l y s i s w o u l d n o t be r u l e d o u t c o m p l e t e l y . An i n f o r m a l a n a l y s i s o f t h e t r a n s c r i p t s o f i n t e r v i e w s m i g h t p r o v e u s e f u l f o r t h e d i r e c t i o n o f T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 106 s u b s e q u e n t i n t e r v i e w s . I s s u e s and c o n c e p t s m i g h t emerge t h a t c o u l d be r a i s e d i n s u b s e q u e n t i n t e r v i e w s . T h i s i n f o r m a l a n a l y s i s c o n s i s t s o f r e a d i n g t h e t r a n s c r i p t s o f i n t e r v i e w s and o b s e r v a t i o n l o g s and k e e p i n g a s e p a r a t e d i a r y o f r e a c t i o n s t o d a t a (Bogdan & B i k l e n , 1 9 8 2 ) . The f o r m a l q u a l i t a t i v e a n a l y s i s i n v o l v e s t h e d e v e l o p m e n t o f a c l a s s i f i c a t i o n scheme f o r t h e i n t e r v i e w and o b s e r v a t i o n a l d a t a . A k e y f e a t u r e o f t h i s scheme i s t h a t t h e c a t e g o r i e s emerge o u t o f t h e d a t a . I d e a l l y , t h e d a t a s h o u l d n o t be s o r t e d i n t o p r e - d e t e r m i n e d c a t e g o r i e s . However t h i s w i l l v a r y t o t h e e x t e n t t h a t r e s e a r c h q u e s t i o n s have been d e t a i l e d i n a d v a n c e . T h e r e f o r e , i n t h i s s t u d y , t h e a n a l y s i s w o u l d b e g i n w i t h t h e b r o a d c a t e g o r i e s i d e n t i f i e d i n t h e t e n r e s e a r c h q u e s t i o n s : a p p r o a c h e s t o s t u d y i n g o r l e a r n i n g s t r a t e g i e s f o r e a c h component; a t t i t u d e s t o t h e c o u r s e and i t s v a r i o u s c omponents; s t u d e n t g o a l s and m o t i v e s ; and q u a l i t a t i v e u n d e r s t a n d i n g o f k e y c o n c e p t s . F u r t h e r r e f i n e m e n t o f t h i s c l a s s i f i c a t i o n scheme w o u l d depend on d a t a . The p r o c e s s o f c o n s t r u c t i n g t h e c l a s s i f i c a t i o n scheme i s an i t e r a t i v e p r o c e d u r e whereby q u o t e s f r o m i n d i v i d u a l i n t e r v i e w s a r e s o r t e d i n t o a p p r o p r i a t e c a t e g o r i e s and t h e n t h e q u o t e s and t h e c a t e g o r i e s f r o m a l l i n t e r v i e w s a r e p o o l e d t o f o r m c a t e g o r i e s t h a t c u t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 107 a c r o s s a l l i n t e r v i e w s . S o r t i n g t h e r e s p o n s e s i n t o t h e s e d e s c r i p t i v e c a t e g o r i e s i n v o l v e s r e d u c i n g t h e u n i m p o r t a n t d i s s i m i l a r i t i e s s u c h as t e r m i n o l o g y , e x a m p l e s and o t h e r s u p e r f i c i a l c h a r a c t e r i s t i c s , a nd i n t e g r a t i n g and g e n e r a l i z i n g t h e i m p o r t a n t s i m i l a r i t i e s s u c h a s " t h e s p e c i f i c a t i o n o f t h e c o r e e l e m e n t s w h i c h make up t h e c o n t e n t and s t r u c t u r e o f a g i v e n c a t e g o r y . T h i s means t h a t t h e p r o t o c o l s have t o be s t u d i e d w i t h t h e i n t e n t i o n o f u n d e r s t a n d i n g what t h e s t u d e n t s a r e e x p r e s s i n g i r r e s p e c t i v e o f what words o r e x a m p l e s t h e y may u s e , w h i c h may show a c o n s i d e r a b l e v a r i a t i o n e v e n b e t w e e n a n s w e r s b e l o n g i n g t o t h e same c a t e g o r y . S t a r t i n g w i t h a c o m p a r a t i v e l y l a r g e number o f c a t e g o r i e s t h e r e s e a r c h e r w i l l g r a d u a l l y r e f i n e t h e s e , a r r i v i n g a t a s m a l l e r s e t o f c a t e g o r i e s t h a t may f i n a l l y be d i f f i c u l t o r i m p o s s i b l e t o c o l l a p s e f u r t h e r " ( D a h l g r e n , 1984, pp. 2 4 - 2 6 ) . M a r t o n (1988) c a l l s t h i s a d i a l e c t i c a l a n a l y s i s b e c a u s e t h e m e a n i n g o f t h e c a t e g o r i e s i s d e v e l o p e d b y b r i n g i n g t h e q u o t e s t o g e t h e r w h i l e t h i s e v o l v i n g m e a n i n g d e t e r m i n e s w h i c h q u o t e s w i l l be i n c l u d e d . The c l a s s i f i c a t i o n scheme s h o u l d a l s o be be a r t i c u l a t e d ( i . e . , moves f r o m t h e g e n e r a l t o t h e s p e c i f i c ) ; l o g i c a l l y c o r r e c t ( i . e . , t h e c a t e g o r i e s a r e e x h a u s t i v e and m u t u a l l y e x c l u s i v e ) ( L a z a r s f e l d & B a r t o n , 1971) . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 108 The s m a l l amount o f d a t a f r o m t h e g r o u p m e e t i n g a n d o b s e r v a t i o n o f t h e a u d i o t e l e c o n f e r e n c e s a n d v i d e o s t u d y s e s s i o n s w o u l d a l s o be u s e d t o d e v e l o p a n d c o n f i r m t h e c a t e g o r i e s t h a t emerge f r o m t h e i n t e r v i e w d a t a . Once t h e d a t a have b e e n s o r t e d a n d c l a s s i f i e d , two q u a n t i t a t i v e a n a l y s e s w o u l d be p e r f o r m e d . A c r o s s - t a b u l a t i o n and c a l c u l a t i o n o f t h e Goodman and K r u s k a l ' s Tau w o u l d be p e r f o r m e d t o d e t e r m i n e t h e s i g n i f i c a n c e o f t h e r e l a t i o n s h i p b e t ween t h e f o l l o w i n g v a r i a b l e s : 1. s t u d e n t g o a l s and m o t i v a t i o n f o r t a k i n g t h e c o u r s e a n d t h e i r a p p r o a c h t o l e a r n i n g . 2. A p p r o a c h t o l e a r n i n g a n d q u a l i t a t i v e o utcomes o f l e a r n i n g . 3. G o a l s and m o t i v a t i o n f o r t a k i n g t h e c o u r s e a n d q u a l i t a t i v e u n d e r s t a n d i n g . The c r o s s t a b u l a t i o n w o u l d be u s e d h e r e b e c a u s e t h e v a r i a b l e s i n q u e s t i o n s a r e s c a l e d n o m i n a l l y . Goodman and K r u s k a l ' s Tau w o u l d be u s e d t o d e t e r m i n e t h e s i g n i f i c a n c e o f t h e a s s o c i a t i o n b e t w e e n t h e v a r i a b l e s b e c a u s e i t i s n o t a f f e c t e d b y sample s i z e i n t h e way t h a t t h e c h i s q u a r e t e s t i s . The r e l a t i o n s h i p b e t ween c o u r s e g r a d e s a n d q u a l i t a t i v e u n d e r s t a n d i n g w o u l d be a n a l y z e d t h r o u g h t h e us e o f a n a l y s i s o f v a r i a n c e . Mean c o u r s e g r a d e s w o u l d be computed f o r e a c h " q u a l i t a t i v e u n d e r s t a n d i n g " T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 109 c a t e g o r y a n d an ANOVA and F t e s t w o u l d be p e r f o r m e d t o d e t e r m i n e t h e s i g n i f i c a n c e o f t h e d i f f e r e n c e b e t w e e n t h e s e means. I f t h e F t e s t r e v e a l e d s i g n i f i c a n t d i f f e r e n c e s a Newman-Keuls t e s t w o u l d be p e r f o r m e d t o i d e n t i f y w h i c h p a i r s o f means were s i g n i f i c a n t l y d i f f e r e n t . The p u r p o s e o f t h i s a n a l y s i s w o u l d be t o d e t e r m i n e w h e t h e r o r n o t t h e r e i s a r e l a t i o n s h i p b e t w e e n t h e r e s u l t s o f t r a d i t i o n a l a s s e s s m e n t p r o c e d u r e s a n d a q u a l i t a t i v e a n a l y s i s o f l e a r n i n g . The ANOVA i s p r o p o s e d f o r a n a l y s i s o f t h e s e v a r i a b l e s b e c a u s e c o u r s e g r a d e s a r e m e a s u r e d on an i n t e r v a l s c a l e a n d q u a l i t a t i v e u n d e r s t a n d i n g on a n o m i n a l s c a l e a n d b e c a u s e i t i s a n t i c i p a t e d t h e r e w o u l d be m u l t i p l e c o m p a r i s o n s b e tween s e v e r a l c a t e g o r i e s o f " q u a l i t a t i v e u n d e r s t a n d i n g " . To s u m m a r i z e , t h e t e n r e s e a r c h q u e s t i o n s i d e n t i f i e d e a r l i e r a r e r e p e a t e d b e l o w a l o n g w i t h an i n d i c a t i o n o f how t h e y w o u l d be a n s w e r e d t h r o u g h d a t a a n a l y s i s . 1. How do t h e s t u d e n t s a p p r o a c h e a c h o f t h e com p o n e n t s ; t h a t i s what methods o r s t r a t e g i e s do t h e y u s e t o l e a r n f r o m e a c h o f t h e components? 2. Do t h e s t u d e n t s use d i f f e r e n t a p p r o a c h e s f o r d i f f e r e n t c o mponents? 3. What a r e s t u d e n t s ' g o a l s a n d m o t i v a t i o n s f o r t a k i n g t h i s c o u r s e ? T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 110 These t h r e e q u e s t i o n s w o u l d be a n s w e r e d b y c l a s s i f y i n g i n t e r v i e w d a t a i n t o d e s c r i p t i v e c a t e g o r i e s t h a t c u t a c r o s s i n t e r v i e w s a n d t h e n e x a m i n i n g t h e s e d e s c r i p t i v e c a t e g o r i e s f o r t h e f r e g u e n c i e s o f t h e a p p l i c a b l e c a t e g o r i e s . 4. I s t h e r e a r e l a t i o n s h i p b e t w e e n t h e s e g o a l s a n d m o t i v a t i o n a n d t h e i r a p p r o a c h ? C r o s s t a b u l a t i o n and c a l c u l a t i o n o f Goodman and K r u s k a l 1 s Tau.. 5. What a r e t h e s t u d e n t s ' a t t i t u d e s t o w a r d s t h e c o u r s e a n d i t s i n d i v i d u a l c o mponents? C l a s s i f i c a t i o n o f i n t e r v i e w d a t a as d e s c r i b e d e a r l i e r a n d e x a m i n a t i o n f o r f r e q u e n c i e s o f a p p r o p r i a t e c a t e g o r i e s . 6. How w e l l do s t u d e n t s a c h i e v e b a s e d on a s s i g n m e n t and e x a m i n a t i o n s c o r e s ? Means o f f i n a l c o u r s e g r a d e s w o u l d be u s e d . 7. What does a q u a l i t a t i v e a n a l y s i s o f s t u d e n t s ' l e a r n i n g r e v e a l a b o u t t h e i r u n d e r s t a n d i n g o f k e y c o n c e p t s i n t h e c o u r s e ? C l a s s i f i c a t i o n o f r e s p o n s e s i n t o d e s c r i p t i v e c a t e g o r i e s as d e s c r i b e d e a r l i e r . 8. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s t u d e n t s ' u n d e r s t a n d i n g , as r e v e a l e d b y a q u a l i t a t i v e a n a l y s i s , T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 111 and t h e i r a c h i e v e m e n t , as d e t e r m i n e d by a s s i g n m e n t and e x a m i n a t i o n s c o r e s ? A n a l y s i s o f v a r i a n c e , F t e s t , a n d Newman-Keuls t e s t i f n e c e s s a r y . 9. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s t u d e n t s ' u n d e r s t a n d i n g o f k e y c o n c e p t s , as r e v e a l e d by a q u a l i t a t i v e a n a l y s i s , a n d t h e p r o c e s s e s o f l e a r n i n g e n g a g e d i n by t h e s t u d e n t s ? C r o s s t a b u l a t i o n and c a l c u l a t i o n o f Goodman and K r u s k a l ' s Tau. 10. I s t h e r e a r e l a t i o n s h i p b e t ween t h e s t u d e n t s ' g o a l s a n d m o t i v a t i o n f o r t a k i n g t h e c o u r s e a n d t h e i r u n d e r s t a n d i n g o f k e y c o n c e p t s as r e v e a l e d by a q u a l i t a t i v e a n a l y s i s ? C r o s s t a b u l a t i o n a n d c a l c u l a t i o n o f Goodman and K r u s k a l ' s Tau. R e l i a b i l i t y and V a l i d i t y The i m p o r t a n c e a t t a c h e d t o t h e c o n s t r u c t s o f r e l i a b i l i t y a n d v a l i d i t y v a r i e s c o n s i d e r a b l y among q u a l i t a t i v e r e s e a r c h e r s . Some d i s m i s s them a s l a r g e l y i r r e l e v a n t t o t h i s a p p r o a c h , c l a i m i n g t h a t t h e q u a l i t a t i v e r e s e a r c h e r ' s o n l y g o a l i s t o a c c u r a t e l y a n d h o n e s t l y r e f l e c t t h e s u b j e c t i v e i n t e r p r e t a t i o n o f t h e phenomenon u n d e r i n v e s t i g a t i o n . O t h e r s , s u c h as LeCompte a n d G o e t z ( 1 9 8 2 ) , have a t t e m p t e d t o p r e s e n t T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 112 s t r a t e g i e s t h a t a l l o w q u a l i t a t i v e r e s e a r c h e r s t o enhance t h e r e l i a b i l i t y a n d v a l i d i t y o f t h e i r r e s e a r c h w h i l e a d m i t t i n g t h a t t h e r e a r e s e r i o u s p r o b l e m s w i t h a t t e m p t i n g t o a p p l y t h e s e c o n s t r u c t s t o q u a l i t a t i v e r e s e a r c h . The p r o b l e m i s t h a t t h e s e a r e c r i t e r i a d e v e l o p e d t o e v a l u a t e t h e r e s u l t s o f q u a n t i t a t i v e r e s e a r c h . They a r e b a s e d on t h e p o s i t i v i s t e p i s t e m o l o g y u n d e r l y i n g t h e q u a n t i t a t i v e a p p r o a c h w h i c h assumes t h a t a g e n e r a l i z e d f o r m o f o b j e c t i v e k n o w l e d g e can be a c h i e v e d t h r o u g h s y s t e m a t i c , c o m p a r a t i v e and r e p l i c a t i v e o b s e r v a t i o n . H i r s c h m a n (1986) has f o u n d a way o u t o f t h i s d i l e m m a by p r e s e n t i n g an a l t e r n a t i v e s e t o f c r i t e r i a f o r e v a l u a t i n g q u a l i t a t i v e r e s e a r c h . These a r e c r e d i b i l i t y , t r a n s f e r a b i l i t y , d e p e n d a b i l i t y a n d c o n f i r m a b i l i t y . These c r i t e r i a a n d t h e i r a p p l i c a t i o n t o t h e p r o p o s e d s t u d y w i l l now be d e s c r i b e d . C r e d i b i l i t y . B e c a u s e t h e p o s i t i v i s t a s s u m p t i o n o f one o b j e c t i v e r e a l i t y no l o n g e r a p p l i e s i n q u a l i t a t i v e r e s e a r c h , c r e d i b i l i t y depends on e n s u r i n g t h a t t h e m u l t i p l e r e a l i t i e s o f t h e s u b j e c t s have been r e p r e s e n t e d t o t h e i r s a t i s f a c t i o n . T h i s w o u l d be a c c o m p l i s h e d i n t h i s s t u d y by p r e s e n t i n g t h e f i n a l d e s c r i p t i v e c a t e g o r i e s t h a t emerge f r o m t h e i n t e r v i e w a n d o b s e r v a t i o n a l d a t a d e a l i n g w i t h s t u d e n t a t t i t u d e s , T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 113 a p p r o a c h e s and outcomes t o t h e s t u d e n t s t h e m s e l v e s f o r t h e i r r e a c t i o n . T r a n s f e r a b i l i t y . T h i s c a n r e a l l y o n l y be d e t e r m i n e d on a p o s t - h o c b a s i s b e c a u s e "one must know n o t o n l y t h e s p e c i f i c s o f t h e c o n t e x t i n w h i c h t h e i n t e r p r e t a t i o n was g e n e r a t e d , b u t a l s o t h e s p e c i f i c s o f t h e c o n t e x t t o w h i c h t h e i n t e r p r e t a t i o n i s t o be a p p l i e d . However, t o comprehend t h e s p e c i f i c s o f t h e s e c o n d c o n t e x t , one f i r s t must c o n s t r u c t an i n t e r p r e t a t i o n o f i t . Hence, t h e o n l y way t h e t r a n s f e r a b i l i t y o f a p a r t i c u l a r i n t e r p r e t a t i o n c a n be a s s e s s e d i s by c o m p a r i n g i t w i t h i n t e r p r e t a t i o n s c o n s t r u c t e d i n o t h e r c o n t e x t s " ( H i r s c h m a n , p. 2 4 5 ) . B e c a u s e o f t h e e x p l o r a t o r y n a t u r e o f t h i s s t u d y , t r a n s f e r a b i l i t y w o u l d n o t be a m a j o r c o n c e r n The p u r p o s e i s n o t t o r e a c h c o n c l u s i o n s t h a t w o u l d have w i d e a p p l i c a b i l i t y , b u t r a t h e r t o p r o v i d e d i r e c t i o n f o r more d e t a i l e d and r e f i n e d f u t u r e s t u d i e s . D e p e n d a b i l i t y . T h i s s e e k s t o a nswer t h e q u e s t i o n , "How does one know t h e r e s e a r c h e r i s r e n d e r i n g a d e p e n d a b l e c o n s t r u c t i o n o f t h e phenomenon b e i n g r e c o r d e d " ( H i r s c h m a n , p. 2 4 5 ) . T h i s w o u l d be d e a l t w i t h i n t h i s s t u d y by u s i n g a two p e r s o n r e s e a r c h team a n d d i v i d i n g t h e d a t a g a t h e r i n g r o u g h l y i n h a l f . E a c h i n v e s t i g a t o r w o u l d p e r f o r m h i s o r h e r own p r e l i m i n a r y q u a l i t a t i v e a n a l y s i s i n a d d i t i o n t o a n a l y z i n g e a c h T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 114 o t h e r s d a t a . The f i n a l a n a l y s e s a nd c l a s s i f i c a t i o n o f t h e d a t a w o u l d be p e r f o r m e d j o i n t l y . A n o t h e r s t r a t e g y f o r d e a l i n g w i t h d e p e n d a b i l i t y i s by u s i n g m u l t i p l e s o u r c e s o f d a t a . T h i s w o u l d be d i f f i c u l t t o a c c o m p l i s h i n t h i s s t u d y , b u t may be u s e d t o a l i m i t e d d e g r e e b y c o m p a r i n g some i n t e r v i e w d a t a w i t h d a t a g a t h e r e d t h r o u g h o b s e r v a t i o n o f g r o u p m e e t i n g s and d a t a g a t h e r e d i n t h e g r o u p i n t e r v i e w . C o n f i r m a b i l i t y . T h i s i s a n a l o g o u s t o c o n c e p t s o f n e u t r a l i t y and o b j e c t i v i t y i n p o s i t i v i s t s c i e n c e . However i n q u a l i t a t i v e r e s e a r c h , t h e r e s e a r c h e r i s assumed t o be a p a r t o f t h e phenomenon u n d e r i n v e s t i g a t i o n and d e e p l y immersed i n i t s i n t e r p r e t a t i o n . Thus c o n f i r m a b i l i t y depends on t h e c o n c l u s i o n s b e i n g s u p p o r t a b l e by t h e d a t a g a t h e r e d . T h i s w o u l d i n v o l v e c l e a r l y r e l a t i n g c o n c l u s i o n s t o s p e c i f i c q u o t e s o r o b s e r v a t i o n s as i n E n t w i s t l e ' s (1984) d e s c r i p t i o n o f " r i g o r o u s q u a l i t a t i v e a n a l y s i s " d e s c r i b e d e a r l i e r . T h i s w o u l d be f o l l o w e d b y a r e v i e w o f t h e c o n c l u s i o n s a nd t h e i r s u p p o r t i n g d a t a b y o u t s i d e a u d i t o r s , a method u s e d i n a s t u d y by P a r l e t t & H a m i l t o n ( 1 9 7 2 ) . T i m e t a b l e I t i s e x p e c t e d t h a t 18 months w o u l d be r e q u i r e d t o c o m p l e t e t h i s s t u d y . S i x months w o u l d be r e q u i r e d f o r d a t a c o l l e c t i o n ; s i x months f o r d a t a a n a l y s i s ; a n d s i x T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 115 months f o r w r i t i n g t h e r e p o r t . Most o f t h e d a t a c o l l e c t i o n w o u l d t a k e p l a c e i n t h e l a s t t h r e e months o f t h e d a t a c o l l e c t i o n p e r i o d b e c a u s e d u r i n g t h e c o u r s e o n l y t h e i n t e r v i e w d a t a on s t u d e n t g o a l s a n d o b s e r v a t i o n a n d g r o u p m e e t i n g d a t a c o u l d be c o l l e c t e d . The r e s t o f t h e i n t e r v i e w d a t a , w h i c h i s most o f t h e d a t a , c o u l d n o t be c o l l e c t e d u n t i l t h e c o u r s e i s c o m p l e t e d i n t h e f o u r t h month. Summary I t i s h o p e d t h a t by u s i n g t h i s q u a l i t a t i v e a p p r o a c h t o e x a m i n e t h e p r o c e s s and outcomes o f l e a r n i n g , some t e n t a t i v e c o n c l u s i o n s c a n be drawn a b o u t how and what s t u d e n t s l e a r n f r o m d i f f e r e n t methods o f d e l i v e r y i n d i s t a n c e e d u c a t i o n . I n p a r t i c u l a r , i t i s ho p e d t h a t some i n s i g h t w o u l d be g a i n e d i n t o how and what s t u d e n t s l e a r n f r o m v i d e o t a p e d l e c t u r e s , c o u r s e m a n u a l s and a u d i o t e l e c o n f e r e n c e s . E q u a l l y i m p o r t a n t w o u l d be s t u d e n t r e a c t i o n s t o a n d f e e l i n g s a b o u t t h e d i f f e r e n t components o f t h e c o u r s e . However, t h i s s t u d y i s o n l y p r o p o s e d as a f i r s t e x p l o r a t o r y s t e p i n t h e p r o c e s s o f a t t e m p t i n g t o u n d e r s t a n d l e a r n i n g f r o m d i f f e r e n t d i s t a n c e e d u c a t i o n modes f r o m t h e s t u d e n t s ' p e r s p e c t i v e . I t s s u c c e s s w o u l d be m e a s u r e d by i t s a b i l i t y t o p r o v i d e enough d i r e c t i o n t o a l l o w r e s e a r c h e r s t o b e g i n t o e x a m i n e more s p e c i f i c q u e s t i o n s , s u c h as how t o u t i l i z e T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 116 v i d e o t a p e s and o t h e r m e d i a , u s i n g r e s e a r c h methods t h a t a r e l i k e l y t o p r o d u c e m e a n i n g f u l r e s u l t s . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 117 R e f e r e n c e s A c h e n b a c h , T.M. ( 1 9 7 8 ) . Research in developmental psychology. New Y o r k : F r e e P r e s s . A g l e r , L.S. ( 1 9 7 6 ) . Evaluation of the English 101 telecourse "Writing for a Reason" D a l l a s C o u n t y Community C o l l e g e D i s t r i c t , T e x a s . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 136 868) A g l e r , L.S.& L i n n , T.B. ( 1 9 7 6 ) . Telecourses in Dallas: The f i r s t three years. D a l l a s C o u n t y Community C o l l e g e D i s t r i c t , T e x a s . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 126 969) A v e r s a , F.M. ( 1 9 8 3 ) . E v a l u a t i o n o f d i s t a n c e l e a r n i n g s y s t e m s : S e l e c t e d i s s u e s and f i n d i n g s . I n L.N.Purdy ( E d . ) , Reaching new students through new technologies (pp 3 1 8 - 3 3 0 ) . Dubuque, Iowa: K e n d a l l Hunt. B a n t o c k , G.H. ( 1 9 6 1 ) . E d u c a t i o n a l r e s e a r c h : A c r i t i c i s m . Harvard Educational Review, 31, 261-280. B a r b a t s i s , G.S. ( 1 9 7 8 ) . The N a t u r e o f i n q u i r y and a n a l y s i s o f t h e o r e t i c a l p r o g r e s s i n i n s t r u c t i o n a l t e l e v i s i o n f r o m 1950 t o 1970. Review of Educational Research, 48(3), 399-414. B a t e s , A.W. ( 1 9 8 1 a ) . Some u n i q u e c h a r a c t e r i s t i c s o f t e l e v i s i o n a n d some i m p l i c a t i o n s f o r t e a c h i n g and l e a r n i n g . Journal of Educational Television and Other Media, 8(1), unknown B a t e s , A.W. ( 1 9 8 1 b ) . Towards a b e t t e r r e s e a r c h f r a m e w o r k f o r e v a l u a t i n g t h e e f f e c t i v e n e s s o f e d u c a t i o n a l m e d i a . B r i t i s h Journal of Educational Technology 12, 215-223. B a t e s , A.W. (1984) Broadcasting in education: An evaluation. London: C o n s t a b l e . B a t e s , A.W. & G a l l a g h e r , M. ( 1 9 7 7 ) . Improving the effectiveness of Open University t e l e v i s i o n case- studies and documentaries. M i l t o n K e y n e s : Open U n i v e r s i t y . B e c k e r , H.S., G e e r , B. & Hughes, E.C. ( 1 9 6 8 ) . Making the grade: the academic side of college l i f e . New Y o r k : W i l e y . T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 118 B l o o m , B.S. ( 1 9 5 6 ) . Taxonomy of educational objectives. Handbook I: Cognitive domain. New Y o r k : Longmans G r e e n . Bogdan, R.C. & B i k l e n , S.K. ( 1 9 8 2 ) . Q u a l i t a t i v e research for education: An introduction to theory and methods. B o s t o n : A l l y n & B a c o n . Brown, L.A. (1975) . Learner responses to the use of t e l e v i s i o n in UMA courses. ( W o r k i n g p a p e r No. 8 ) . U n i v e r s i t y o f M i d A m e r i c a , L i n c o l n , N e b r a s k a . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 14 9 7 9 3 ) . Brown, L.A. (197 6 ) . Employment of an open learning course with t r a d i t i o n a l and nontraditional learners: Some comparisons. ( W o r k i n g p a p e r No. 1 3 ) . U n i v e r s i t y o f M i d - A m e r i c a , L i n c o l n , N e b r a s k a . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 159 9 6 6 ) . Brown, R.D., Brown, L.A. & D a n i e l s o n , J . E . ( 1 9 7 5 ) . I n s t r u c t i o n a l t r e a t m e n t s , p r e s e n t e r t y p e s , and l e a r n e r c h a r a c t e r i s t i c s as s i g n i f i c a n t v a r i a b l e s i n i n s t r u c t i o n a l t e l e v i s i o n f o r a d u l t s . Journal of Educational Psychology, 67(3), 391-404. B u r g e , E . J . , W i l s o n , J , & M e h l e r , A. ( 1 9 8 4 ) . Communications and information technologies and distance education in Canada. (New t e c h n o l o g i e s i n C a n a d i a n e d u c a t i o n , P a p e r N o . 5 ) . T o r o n t o : O n t a r i o E d u c a t i o n a l C o m m u n i c a t i o n s A u t h o r i t y B u r g e s s , R o b e r t G. ( 1 9 8 4 ) . In the Field: An Introduction to F i e l d Research. London: A l l e n & Unwin. B u r n s , R.W. ( 1 9 7 6 ) . I n s t r u c t i o n a l t e l e v i s i o n , i n t e r a c t i o n a n d l e a r n i n g o b j e c t i v e s . Educational Technology, 16(5), 44-49. C a m p b e l l , D.T., & S t a n l e y , J.C. ( 1 9 6 3 ) . E x p e r i m e n t a l and q u a s i - e x p e r i m e n t a l d e s i g n s f o r r e s e a r c h on t e a c h i n g . I n N.L. Gage ( E d . ) , Handbook of research on teaching. C h i c a g o : Rand M c N a l l y . Campeau, P. ( 1 9 7 4 ) . S e l e c t i v e r e v i e w o f t h e r e s u l t s o f r e s e a r c h on t h e use o f a u d i o - v i s u a l m e d i a t o t e a c h a d u l t s . AV Communication Review, 22(1), 5-40. T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 119 Chacon-Duque, F . J . ( 1 9 8 5 ) . Building academic q u a l i t y in distance higher education. A monograph in higher education evaluation and policy. U n i v e r s i t y P a r k : P e n n s y l v a n i a S t a t e U n i v e r s i t y , C e n t e r f o r t h e S t u d y o f H i g h e r E d u c a t i o n . Chu, C.G. & Schramm, W. ( 1 9 6 8 ) . Learning from t e l e v i s i o n : What the research says. W a s h i n g t o n D.C. : N a t i o n a l A s s o c i a t i o n o f E d u c a t i o n a l B r o a d c a s t e r s C l a g e t t , ( 1 9 8 3 ) . A review of the t e l e c r e d i t program, F a l l 1976-1982. (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 2 2 9 - 0 9 1 ) . D a h l g r e n , L.O. ( 1 9 8 4 ) . Outcomes o f l e a r n i n g . I n F. M a r t o n , D. H o u n s e l l & N. E n t w i s t l e ( E d s . ) . The Experience of learning (pp. 1 9 - 3 5 ) . E d i n b u r g h : S c o t t i s h A c a d e m i c P r e s s . D a l l a s Community C o l l e g e D i s t r i c t . ( 1 9 8 3 ) . S t u d e n t e v a l u a t i o n o f t e l e c o u r s e s i n t h e D a l l a s C o u n t y Community C o l l e g e D i s t r i c t . I n L.N.Purdy ( E d . ) , Reaching new students through new technologies (pp 3 0 8 - 3 1 7 ) . Dubuque, Iowa: K e n d a l l Hunt. D a l t o n , M. ( 1 9 6 4 ) . P r e c o n c e p t i o n s and methods i n Men Who Manage. I n P. Hammond ( E d . ) . S o c i o l o g i s t s at work. (pp. 5 0 - 9 5 ) . New Y o r k : B a s i c B o o k s . D a n i e l , J.C., S t r o u d , M., & Thompson, J . ( 1 9 8 2 ) . ( E d s . ) . Learning at a distance: A world perspective. Edmonton: A t h a b a s c a U n i v e r s i t y P r e s s . Donsky, A., Vaughn, R., B u r k e , L., & H i t e , C. ( 1 9 8 3 ) . Telecourses: A non-conventional approach to education. M e n t o r , O h i o : L a k e l a n d Community C o l l e g e . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 171 3 3 6 ) . E n t w i s t l e , N. ( 1 9 8 4 ) . C o n t r a s t i n g p e r s p e c t i v e s on l e a r n i n g . I n F. M a r t o n , D. H o u n s e l l & N. E n t w i s t l e ( E d s . ) . The Experience of learning (pp. 1 - 1 8 ) . E d i n b u r g h : S c o t t i s h A c a d e m i c P r e s s . F e t t e r m a n , D.M. ( 1 9 8 8 ) . Q u a l i t a t i v e a p p r o a c h e s t o e v a l u a t i n g e d u c a t i o n . Educational Researcher 1 7 ( 8 ) . 17-23. F i l s t e a d W.J. ( 1 9 7 0 ) . I n t r o d u c t i o n . I n W.J. F i l s t e a d ( E d . ) . Q u a l i t a t i v e methodology: Firsthand involvement with the social world (pp. 1-1 1 ) . C h i c a g o : Markham. T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 120 F i r e s t o n e , W.A. ( 1 9 8 7 ) . M e a n i n g i n method: The R h e t o r i c o f q u a n t i t a t i v e and q u a l i t a t i v e r e s e a r c h . Educational Researcher 16(1). 16-21. G a l l a g h e r , M. ( 1 9 7 8 ) . Audio-visual media for teaching and t r a i n i n g : The contribution of research. M i l t o n K e y n e s , E n g l a n d : Open U n i v e r s i t y . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 158 7 6 9 ) . G l a s e r , B.G. & S t r a u s s , A.L. ( 1 9 7 0 ) . D i s c o v e r y o f s u b s t a n t i v e t h e o r y : A b a s i c s t r a t e g y u n d e r l y i n g q u a l i t a t i v e r e s e a r c h . I n W.J. F i l s t e a d ( E d . ) . Q u a l i t a t i v e methodology: Firsthand involvement with the social world (pp. 2 8 8 - 3 0 4 ) . C h i c a g o : Markham. Hammersley, M. & A t k i n s o n , P. ( 1 9 8 3 ) . Ethnography: P r i n c i p l e s into p r a c t i c e . London: T a v i s t o c k . H i r s c h m a n , E.C. ( 1 9 8 6 ) . H u m a n i s t i c i n q u i r y i n m a r k e t i n g r e s e a r c h : P h i l o s o p h y , method a n d c r i t e r i a . Journal of Marketing Research, 23, A u g u s t 86, 237-249. H o l m b e r g , B. ( 1 9 7 7 ) . Distance education: A survey and bibliography. London: Kogan Page. H o l m b e r g , B. ( 1 9 8 1 ) . S t a t u s and trends in distance education. London: Kogan Page. Howe, K.R. ( 1 9 8 8 ) . A g a i n s t t h e q u a n t i t a t i v e - q u a l i t a t i v e i n c o m p a t i b i l i t y t h e s i s . Educational Researcher 17(8). 10-16. H u l t , R E. ( 1 9 8 0 ) . The e f f e c t i v e n e s s o f u n i v e r s i t y t e l e v i s i o n i n s t r u c t i o n a n d f a c t o r s i n f l u e n c i n g s t u d e n t a t t i t u d e s . College Student Journal, 14, S p r i n g , 5-7. J a c o b , E. ( 1 9 8 7 ) . Q u a l i t a t i v e r e s e a r c h t r a d i t i o n s : A r e v i e w . Review of Educational Research 5 7 ( 1 ) . 1-50. Keegan, D.J. ( 1 9 8 0 ) . On d e f i n i n g d i s t a n c e e d u c a t i o n . Distance Education, 1(1) 13-36. L a z a r s f e l d , P.F. & B a r t o n , A. ( 1 9 7 1 ) . Q u a l i t a t i v e measurement i n t h e s o c i a l s c i e n c e s . I n B . J . F r a n k l i n & H.W. O s b o r n e ( E d s . ) . Research methods: Issues and i n s i g h t s , (pp. 1 4 1 - 1 6 0 ) . B e l m o n t CA.: Wadsworth. LeCompte, M.D. & G o e t z , J.P. ( 1 9 8 2 ) . P r o b l e m s o f r e l i a b i l i t y a n d v a l i d i t y i n e t h n o g r a p h i c r e s e a r c h . Review of Educational Research 52(1) 31-60. T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 121 L e w i s , R.L. ( 1 9 8 3 ) . Learning through t e l e - communications. W a s h i n g t o n : A m e r i c a n A s s o c i a t i o n f o r H i g h e r E d u c a t i o n , George W a s h i n g t o n U n i v e r s i t y . M a r t o n , F. ( 1 9 8 8 ) . Phenomenography: e x p l o r i n g d i f f e r e n t c o n c e p t i o n s o f r e a l i t y . I n D.M. F e t t e r m a n ( E d . ) . Q u a l i t a t i v e approaches to evaluation in education. (pp. 1 7 6 - 2 0 5 ) . New Y o r k : P r a e g e r . M a r t o n , F. & S a l j o , R. ( 1 9 8 4 ) . A p p r o a c h e s t o l e a r n i n g . I n F. M a r t o n , D. H o u n s e l l & N. E n t w i s t l e ( E d s . ) . The Experience of learning (pp. 36-55) . E d i n b u r g h : S c o t t i s h A c a d e m i c P r e s s . M i n n i s , J o h n R. ( 1 9 8 5 ) . E t h n o g r a p h y , c a s e s t u d y , g r o u n d e d t h e o r y and d i s t a n c e e d u c a t i o n r e s e a r c h . Distance Education 6(2) . 189-198. Moore, M.G. ( 1 9 7 5 ) . C o g n i t i v e s t y l e and t e l e m a t h i c ( d i s t a n c e ) t e a c h i n g . ICCE Newsletter, 5 ( 4 ) , 3-10. Mount, G. & W a i t e r s , S. ( 1 9 8 0 ) . T r a d i t i o n a l v e r s u s t e l e v i s e d i n s t r u c t i o n a l methods f o r i n t r o d u c t o r y p s y c h o l o g y . Journal of Educational Technology Systems, 9 45-53 N e i l , M.W. ( 1 9 8 1 ) . ( E d . ) . Education of adults at a distance. London: Kogan Page. O l s o n , D.R. & B r u n e r , J . S . ( 1 9 7 4 ) . L e a r n i n g t h r o u g h e x p e r i e n c e a n d l e a r n i n g t h r o u g h m e d i a . I n D.R.Olson ( E d . ) , Media and symbols: The forms of communication and education. The 73rd yearbook of the National Society for the Study of Education. Part 1. (pp. 125-150) C h i c a g o : NSSE. P a r l e t t , M.R. & H a m i l t o n , D. ( 1 9 7 2 ) . E v a l u a t i o n as i l l u m i n a t i o n : a new a p p r o a c h t o t h e s t u d y o f i n n o v a t o r y p r o g r a m s . U n p u b l i s h e d r e p o r t . ( R e p r i n t e d i n D. H a m i l t o n & c o - a u t h o r s . ( 1 9 7 7 ) . Beyond the numbers game. B a s i n g s t o k e : M a c m i l l a n . P e r r y , W.G. ( 1 9 7 0 ) . Forms of i n t e l l e c t u a l and e t h i c a l development in the college years: a scheme. New Y o r k : H o l t , R i n e h a r t & W i n s t o n . P r o s s e r , M.T. ( 1 9 8 4 ) . Towards more e f f e c t i v e e v a l u a t i o n s t u d i e s o f e d u c a t i o n a l m e d i a . B r i t i s h Journal of Educational Technology, 15, 33-42. T e l e v i s i o n i n D i s t a n c e E d u c a t i o n 122 P u r d y , L. ( 1 9 7 8 ) . Telecourse students: How well do they learn? P a p e r p r e s e n t e d a t t h e A n n u a l C o n v e n t i o n o f t h e A m e r i c a n A s s o c i a t i o n o f Community and J u n i o r C o l l e g e s - A p r i l 9-12, 1978. (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 154 8 5 1 ) . R i c h a r d s o n , P. ( 1 9 8 1 ) . I s s u e s in television-centered i n s t r u c t i o n . P a p e r p r e s e n t e d a t t h e A n n u a l M e e t i n g o f t h e A m e r i c a n E d u c a t i o n a l R e s e a r c h A s s o c i a t i o n , Los A n g e l e s , A p r i l 1981. (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 205 2 1 7 ) . R i s t , R.C. ( 1 9 8 2 ) . On t h e a p p l i c a t i o n o f e t h n o g r a p h i c i n q u i r y t o e d u c a t i o n : P r o c e d u r e s and p o s s i b i l i t i e s . Journal of Research in Science Teaching 19(6) 439- 450 . R o b i n s o n , R. & West, P.C. ( 1 9 8 6 ) . I n t e r a c t i v e cable t e l e v i s i o n : An evaluation study. P a p e r p r e s e n t e d a t t h e A n n u a l C o n v e n t i o n o f t h e A s s o c i a t i o n f o r E d u c a t i o n a l C o m m u n i c a t i o n and T e c h n o l o g y , L a s V e g a s , NV. J a n u a r y 16-21, 1986. (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 267 7 8 9 ) . Salomon, G. ( 1 9 7 4 ) . What i s l e a r n e d and how i t i s t a u g h t : The i n t e r a c t i o n b e t w e e n m e d i a , message, t a s k and l e a r n e r . I n D.R. O l s o n ( E d . ) , Media and symbols: The forms of communication and education. The 73rd yearbook of the National Society for the Study of Education. Part 1. (pp. 383-406) C h i c a g o : NSSE.. Salomon, G. ( 1 9 7 6 ) . A c o g n i t i v e a p p r o a c h t o m e d i a . Educational Technology, 16(5), 25-28. Salomon, G. ( 1 9 7 9 ) . Interaction of media, cognition and learning. San F r a n c i s c o : J o s s e y B a s s . Schramm, W. ( 1 9 7 7 a ) . Some notes on research, theory, and production in i n s t r u c t i o n a l t e l e v i s i o n . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 157 5 1 4 ) . Schramm, W. ( 1 9 7 7 b ) . Big media, l i t t l e media. B e v e r l y H i l l s : Sage P u b l i c a t i o n s I n c . S e l l , G.R. (197 6 ) . Introductory psychology (Second o f f e r i n g ) . Course evaluation report. U n i v e r s i t y o f M i d A m e r i c a , L i n c o l n , N e b r a s k a . (ERIC Document R e p r o d u c t i o n S e r v i c e No. ED 159 9 6 4 ) . T e l e v i s i o n i n Distance Education 123 Shavelson, R.J., Stasz, C , Schlossman, S., Webb, N., Hotta, J . , & Go l d s t e i n , S. ( 1 9 8 6 ) . Exchangeability of student outcomes from regular and telecourse i n s t r u c t i o n : A f e a s a b i l i t y study. Santa Monica, C a l i f o r n i a : Rand McNally.Webb & Hotta, 1987 Shavelson, R.J., Webb, N.M. & Hotta, J.Y. ( 1 9 8 7 ) . The concept of e x c h a n g e a b i l i t y i n designing t e l e c o u r s e e v a l u a t i o n s . Journal of Distance Education, 2 ( 1 ) 27-40. Smith, J . ( 1 9 8 3 ) . Evaluation of the telecourse program at Saddleback College: Student retention and academic achievement. Unpublished D o c t o r a l . D i s s e r t a t i o n , Nova U n i v e r s i t y . (ERIC Document Reproduction S e r v i c e No. ED 239 6 8 4 ) . Smith, J.K. (1983) . Q u a n t i t a t i v e versus q u a l i t a t i v e research: An attempt to c l a r i f y the i s s u e . Educational Researcher 12(2). 6-13. S t i c k e l l , D.W. ( 1 9 6 3 ) . A c r i t i c a l review of the methodology and r e s u l t s of research comparing televised and face to face i n s t r u c t i o n . Unpublished d o c t o r a l d i s s e r t a t i o n , Pennsylvania State U n i v e r s i t y . S u l l i v a n , A.M., Andrews, E.A., Maddigan, R.I., & Noseworthy, CM. ( 1 9 7 9 ) . The r e l a t i v e effectiveness of l i v e versus videotaped i n s t r u c t i o n modes on achievement and student a t t i t u d e s . Paper presented at the second conference on experimental research i n videotaped i n s t r u c t i o n and i t s p r a c t i c a l i m p l i c a t i o n s , Corner Brook, Newfoundland. (ERIC Document Reproduction Se r v i c e No. ED 2 64 832) Walker, Robert (Ed.). ( 1 9 8 5 ) . Applied q u a l i t a t i v e research. A l d e r s h o t : Gower. Wilson, S. ( 1 9 7 7 ) . The use of ethnographic techniques i n ed u c a t i o n a l research. Review of Educational Research 47(1) 245-265. Wilkinson, G.L. ( 1 9 8 0 ) . Media in i n s t r u c t i o n : Sixty years of research. Washington: A s s o c i a t i o n f o r Ed u c a t i o n a l Communications and Technology. Z i g e r e l l , J . J . , & Chausow, H.M. ( 1 9 8 3 ) . Chicago's TV C o l l e g e : Summary of t h i r d year comparisons. In L.N. Purdy (Ed.). Reaching new students through new technologies (pp. 2 8 0 - 2 8 2 ) . Dubugue, Iowa: Kenda l l Hunt.

Cite

Citation Scheme:

    

Usage Statistics

Country Views Downloads
Sweden 13 0
China 5 23
United States 4 1
Russia 2 0
City Views Downloads
Stockholm 13 0
Beijing 5 0
Unknown 2 7
Ashburn 2 0
Sunnyvale 1 0
Orange 1 0

{[{ mDataHeader[type] }]} {[{ month[type] }]} {[{ tData[type] }]}
Download Stats

Share

Embed

Customize your widget with the following options, then copy and paste the code below into the HTML of your page to embed this item in your website.
                        
                            <div id="ubcOpenCollectionsWidgetDisplay">
                            <script id="ubcOpenCollectionsWidget"
                            src="{[{embed.src}]}"
                            data-item="{[{embed.item}]}"
                            data-collection="{[{embed.collection}]}"
                            data-metadata="{[{embed.showMetadata}]}"
                            data-width="{[{embed.width}]}"
                            async >
                            </script>
                            </div>
                        
                    
IIIF logo Our image viewer uses the IIIF 2.0 standard. To load this item in other compatible viewers, use this url:
http://iiif.library.ubc.ca/presentation/dsp.831.1-0054479/manifest

Comment

Related Items