8/9/2019 Tv Evaluation

1/26

Evaluating Educational Programs

Samuel Ball

April 2011

ETS R&D Scientific and PolicyContributions SeriesETS SPC11-01

8/9/2019 Tv Evaluation

2/26

ETS Research Report No. RR-11-15

April 2011

Evaluating Educational Programs

Samuel Ball

8/9/2019 Tv Evaluation

3/26

This paper originally was published by Educational Testing Service in 1979.

Copyright 1979, 2011 by Educational Testing Service. All rights reserved.

ETS, the ETS logo, and LISTENING. LEARNING. LEADING., are

registered trademarks of Educational Testing Service (ETS).

As part of its nonprofit mission, ETS conducts and disseminates the results of research to advance

quality and equity in education and assessment for the benefit of ETSs constituents and the field.

To obtain a PDF or a print copy of a report, please visit:

http://www.ets.org/research/contact.html

8/9/2019 Tv Evaluation

4/26

8/9/2019 Tv Evaluation

5/26

8/9/2019 Tv Evaluation

6/26

3

FFoorreewwoorrdd

TThheeffoorrmmaalleevvaalluuaattiioonnooffeedduuccaattiioonnaallpprrooggrraammssiissaarreellaattiivveellyyrreecceennttpphheennoommeennoonn,,aannddEEdduuccaattiioonnaall

TTeessttiinnggSSeerrvviicceerreesseeaarrcchhsscciieennttiissttsshhaavveebbeeeennaammoonnggtthhoosseessttrriivviinnggttoocchhaarrtttthheeuunnkknnoowwnnwwaatteerrssdduurriinngg

tthheeppaasstt1155yyeeaarrss..TThhiissrreeppoorrttiissaannaatttteemmppttttoorreeccoorrddoouurreexxppeerriieenncceessaannddtthheeiinnssiigghhttsswweehhaavveeggaaiinneedd..

CClleeaarrllyy,,EETTSShhaassnnoottddoonneeiittaallll;;wweehhaavveelleeaarrnneeddmmuucchhffrroommtthheeeeffffoorrttssooffootthheerrssiinntthheeeedduuccaattiioonnaall

ccoommmmuunniittyyaasswweellllaassffrroommoouurroowwnneennddeeaavvoorrss..

IIttiissffiittttiinnggtthhaatttthheerreeppoorrttbbeeaarrsstthheennaammeeooffSSaammuueellBBaallll,,ffoorrhheewwaassoonneeooffoouurrmmoossttaaccttiivvee

pprrooggrraammeevvaalluuaattoorrssffoorr1100yyeeaarrssaannddddiirreecctteeddsseevveerraallppaacceesseettttiinnggssttuuddiieess..HHeerreessiiggnneeddhhiissppoossiittiioonnaassaa

SSeenniioorrRReesseeaarrcchhPPssyycchhoollooggiissttiinn11997788ttooaacccceeppttaacchhaaiirriinneedduuccaattiioonnaatttthheeUUnniivveerrssiittyyooffSSyyddnneeyyiinnhhiiss

nnaattiivveeAAuussttrraalliiaa..

DDrr..BBaallllssttiillllccoollllaabboorraatteesswwiitthhuussoonnooccccaassiioonnaallpprroojjeeccttss,,aannddiittwwaassdduurriinnggaavviissiitteeaarrlliieerrtthhiissyyeeaarrtthhaatthheeppuutttthheeffiinniisshhiinnggttoouucchheessttootthhiissrreeppoorrtt..WWeeppuubblliisshhiittnnoowwiinntthheehhooppeetthhaattwwhhaattwweehhaavveelleeaarrnneedd

aabboouuttpprrooggrraammeevvaalluuaattiioonnwwiillllbbeeooffvvaalluueettooootthheerrssiinneedduuccaattiioonn..

SSaammuueellJJ..MMeessssiicckk

VViicceePPrreessiiddeennttffoorrRReesseeaarrcchh

JJuunnee11,,11997799

8/9/2019 Tv Evaluation

7/26

8/9/2019 Tv Evaluation

8/26

8/9/2019 Tv Evaluation

9/26

8/9/2019 Tv Evaluation

10/26

8/9/2019 Tv Evaluation

11/26

8/9/2019 Tv Evaluation

12/26

8/9/2019 Tv Evaluation

13/26

8/9/2019 Tv Evaluation

14/26

8/9/2019 Tv Evaluation

15/26

8/9/2019 Tv Evaluation

16/26

8/9/2019 Tv Evaluation

17/26

8/9/2019 Tv Evaluation

18/26

8/9/2019 Tv Evaluation

19/26

8/9/2019 Tv Evaluation

20/26

8/9/2019 Tv Evaluation

21/26

8/9/2019 Tv Evaluation

22/26

8/9/2019 Tv Evaluation

23/26

8/9/2019 Tv Evaluation

24/26

8/9/2019 Tv Evaluation

25/26

8/9/2019 Tv Evaluation

26/26

WWaarrdd,,WW..CC..,,&&FFrreeddeerriikksseenn,,NN..AAssttuuddyyoofftthheepprreeddiiccttiivveevvaalliiddiittyyoofftthheetteessttssooffsscciieennttiiffiicctthhiinnkkiinngg..RRBB777766..

PPrriinncceettoonn,,NNJJ::EEdduuccaattiioonnaallTTeessttiinnggSSeerrvviiccee,,JJuunnee11997777..

WWaassddyykkee,,RR..GG..,,&&GGrraannddyy,,JJ..FFiieellddeevvaalluuaattiioonnooffMMaannhhaattttaannCCoommmmuunniittyySScchhoooollDDiissttrriicctt##22eennvviirroonnmmeennttaall

eedduuccaattiioonnpprrooggrraamm..PPrriinncceettoonn,,NNJJ::EEdduuccaattiioonnaallTTeessttiinnggSSeerrvviiccee,,DDeecceemmbbeerr11997766..

WWaassddyykkee,,RR..GG..YYeeaarr33TThhiirrddppaarrttyyaannnnuuaalleevvaalluuaattiioonnrreeppoorrtt::CCaarreeeerreedduuccaattiioonniinnssttrruuccttiioonnaallssyysstteemm

pprroojjeecctt..NNeewwaarrkkSScchhoooollDDiissttrriicctt..NNeewwaarrkk,,DDeellaawwaarree..PPrriinncceettoonn,,NNJJ::EEdduuccaattiioonnaallTTeessttiinnggSSeerrvviiccee,,

MMaarrcchh11997777..

WWaassddyykkee,,RR..GG..AAnneevvaalluuaattiioonnoofftthheeMMaarryyllaannddCCaarreeeerrIInnffoorrmmaattiioonnSSyysstteemm..OOrraallrreeppoorrtt::AAuugguusstt11997766..

WWeebbbb,,EE..JJ..,,CCaammppbbeellll,,DD..TT..,,SScchhwwaarrttzz,,RR..DD..,,&&SSeecchhrreesstt,,LL..UUnnoobbttrruussiivveemmeeaassuurreess::NNoonnrreeaaccttiivveerreesseeaarrcchhiinn

tthheessoocciiaallsscciieenncceess..CChhiiccaaggoo,,IILL::RRaannddMMccNNaallllyy..11996666..

WWooooddffoorrdd,,PP..EE..PPiilloottpprroojjeeccttffoorroorraallpprrooffiicciieennccyyiinntteerrvviieewwtteessttssooffbbiilliinngguuaalltteeaacchheerrssaannddtteennttaattiivvee

ddeetteerrmmiinnaattiioonnooffllaanngguuaaggeepprrooffiicciieennccyyccrriitteerriiaa..PPrrooppoossaallssuubbmmiitttteeddttooIIlllliinnooiissSSttaatteeDDeeppaarrttmmeennttooff

EEdduuccaattiioonn..PPrriinncceettoonn,,NNJJ::EEdduuccaattiioonnaallTTeessttiinnggSSeerrvviiccee,,MMaarrcchh11997755..