Authen'c learning and assessment As many ques+ons as answers! - - PowerPoint PPT Presentation

authen c learning and assessment as many ques ons as
SMART_READER_LITE
LIVE PREVIEW

Authen'c learning and assessment As many ques+ons as answers! - - PowerPoint PPT Presentation

Authen'c learning and assessment As many ques+ons as answers! Professor Kevin Ashford-Rowe Synopsis This presenta'on will consider the role and value of authen2city as a


slide-1
SLIDE 1

Authen'c ¡learning ¡and ¡assessment ¡– ¡ As ¡many ¡ques+ons ¡as ¡answers! ¡

Professor ¡Kevin ¡Ashford-­‑Rowe ¡

slide-2
SLIDE 2

Synopsis ¡

This ¡presenta'on ¡will ¡consider ¡the ¡role ¡and ¡value ¡

  • f ¡‘authen2city’ ¡as ¡a ¡factor ¡in ¡the ¡design ¡and ¡

development ¡of ¡fair, ¡valid, ¡reliable, ¡transparent ¡and ¡ relevant ¡21st ¡Century ¡learning, ¡teaching ¡and ¡ assessment ¡experiences. ¡It ¡will ¡seek ¡to ¡describe ¡ both ¡the ¡broader ¡Higher ¡Educa2on ¡context ¡and ¡ detail ¡some ¡of ¡the ¡factors ¡important ¡in ¡iden'fying ¡ how ¡authen2city ¡might ¡be ¡applied. ¡

slide-3
SLIDE 3

Context ¡

  • Time ¡of ¡major ¡transforma'on ¡and ¡change ¡

¡

  • Exist ¡within ¡a ¡Global ¡Economy ¡

– Increased ¡interna'onal ¡compe''on ¡ Rate ¡of ¡technology ¡uptake ¡and ¡transforma'on ¡ – eLearning ¡now ¡becoming ¡mLearning..! ¡

3 ¡

slide-4
SLIDE 4

Context ¡con2nues… ¡

Background ¡

  • Economic ¡history ¡perspec've ¡

– Agrarian ¡to ¡Industrial ¡Age ¡(the ¡move ¡from ¡the ¡CoMage ¡industry ¡to ¡the ¡factory) ¡ – Industrial ¡to ¡Informa'on ¡Age ¡(the ¡move ¡out ¡of ¡the ¡factory ¡to ¡the ¡open ¡network) ¡

  • Industrial ¡Age ¡educa'on ¡for ¡Industrial ¡Age ¡students ¡
  • Informa'on ¡Age ¡educa'on ¡for ¡Informa'on ¡Age ¡students ¡

¡

  • University ¡educa'on ¡increasingly ¡about ¡developing ¡21st ¡Century ¡professionals ¡who ¡can ¡

access ¡and ¡navigate ¡the ¡informa'on ¡mountain ¡and ¡use ¡valid, ¡reliable ¡oRen ¡‘just ¡in ¡'me’ ¡ informa'on ¡to ¡inform ¡processes ¡and ¡decision ¡making ¡ ¡

  • Learning ¡and ¡teaching ¡ac'vi'es ¡and ¡environments ¡need ¡to ¡support ¡increasingly ¡

collabora've ¡ac'vity ¡in ¡a ¡team ¡based ¡project ¡group ¡approach ¡ ¡ – Where ¡spaces ¡need ¡to ¡be ¡

  • Agile ¡
  • Flexible ¡

¡

¡

slide-5
SLIDE 5

Context ¡contd. ¡

  • Reported ¡change ¡in ¡the ¡student ¡experience: ¡

– Students ¡(school ¡leavers ¡and ¡mature ¡aged) ¡repor'ng ¡ that: ¡

  • Your ¡teachers ¡don’t ¡use ¡enough ¡technology ¡in ¡their ¡

teaching ¡and, ¡when ¡they ¡do, ¡they ¡don’t ¡use ¡it ¡well ¡ enough! ¡ – Changes ¡in ¡the ¡way ¡children ¡educated ¡in ¡schools ¡

  • K-­‑12 ¡– ¡Situated ¡and ¡authen'c ¡learning ¡

experiences, ¡more ¡construc'vist ¡approach ¡ ¡

5 ¡

slide-6
SLIDE 6

Authen'c ¡Learning ¡and ¡Assessment ¡ Innova'on ¡vs. ¡Hygiene ¡

  • From ¡the ¡student’s ¡perspec've ¡

– It’s ¡about ¡their ¡learning ¡experience ¡

  • How ¡and ¡when ¡it ¡is ¡measured ¡
  • How ¡closely ¡does ¡it ¡resemble ¡prac'ce ¡

¡

  • From ¡the ¡teacher’s ¡perspec've ¡

– It’s ¡about ¡mee'ng ¡the ¡expecta'ons ¡of ¡the ¡ ¡student ¡

  • What ¡do ¡you ¡want ¡from ¡me? ¡
  • What ¡do ¡you ¡need ¡from ¡me? ¡

¡

  • From ¡the ¡University’s ¡perspec've ¡

– It’s ¡about ¡providing ¡students ¡with ¡a ¡consistent ¡and ¡quality ¡assured ¡and ¡increasingly ¡a ¡situated ¡ and ¡authen'c ¡learning ¡and ¡teaching ¡experience ¡

  • Consistent ¡with ¡the ¡experience ¡that ¡they ¡receive ¡in ¡other ¡areas ¡of ¡their ¡life ¡
  • Consistent ¡with ¡the ¡ways ¡in ¡which ¡they ¡have ¡been ¡taught ¡to ¡learn ¡
  • At ¡least ¡consistent ¡with ¡the ¡experience ¡compe'tors ¡are ¡providing ¡

– (tradi'onal ¡and ¡non ¡tradi'onal/local, ¡na'onal ¡& ¡global) ¡

6 ¡

slide-7
SLIDE 7

And, ¡remember ¡this! ¡ ¡ ¡

¡ Nothing ¡that ¡we ¡do ¡to, ¡or ¡for, ¡our ¡students ¡is ¡more ¡important ¡ than ¡our ¡assessment ¡of ¡their ¡work ¡and ¡the ¡feedback ¡we ¡give ¡ them ¡on ¡it. ¡The ¡results ¡of ¡our ¡assessment ¡influence ¡our ¡ students ¡for ¡the ¡rest ¡of ¡their ¡lives ¡and ¡careers… ¡ ¡– ¡fine ¡if ¡we ¡get ¡it ¡right, ¡but ¡unthinkable ¡if ¡we ¡get ¡it ¡wrong. ¡ ¡

Race, ¡Brown ¡and ¡Smith ¡(2005), ¡500 ¡Tips ¡on ¡Assessment ¡ JISC ¡-­‑ ¡Effec8ve ¡Assessment ¡in ¡a ¡Digital ¡Age ¡(2010) ¡

¡

¡ ¡

slide-8
SLIDE 8

Why ¡the ¡move ¡to ¡authen'c ¡learning ¡and ¡ assessment? ¡

slide-9
SLIDE 9

An ¡employer ¡speaks: ¡ ¡ Let’s ¡bring ¡classrooms ¡into ¡the ¡21st ¡century ¡

¡We ¡need ¡to ¡tear ¡down ¡an ¡educa+on ¡system ¡designed ¡for ¡ the ¡19th ¡century ¡– ¡and ¡replace ¡it ¡with ¡one ¡that’s ¡suited ¡ for ¡the ¡21st. ¡

¡ ¡ ¡ Rupert ¡Murdoch's ¡Keynote ¡Address ¡to ¡the ¡Founda+on ¡for ¡Excellence ¡in ¡Educa+on ¡ Summit ¡on ¡October ¡14, ¡2011 ¡in ¡San ¡Francisco, ¡California. ¡

¡

slide-10
SLIDE 10

Rupert ¡Murdoch: ¡Let’s ¡bring ¡classrooms ¡into ¡the ¡21st ¡century ¡

¡You ¡don’t ¡get ¡change ¡by ¡plugging ¡in ¡computers ¡to ¡ schools ¡designed ¡for ¡the ¡industrial ¡age. ¡You ¡get ¡it ¡ by ¡deploying ¡technology ¡that ¡re-­‑writes ¡the ¡rules ¡

  • f ¡the ¡game ¡by ¡centering ¡learning ¡around ¡the ¡
  • learner. ¡
slide-11
SLIDE 11

What ¡are ¡we ¡teaching? ¡

Aligning design with Bloom's upper levels encourages higher-order thinking that is

  • ne of the essential skills for the 21stCentury learner
slide-12
SLIDE 12

Where ¡do ¡we ¡teach ¡it? ¡ ¡ The ¡physical ¡learning ¡and ¡teaching ¡environment ¡ Maslow’s ¡Hierarchy ¡of ¡human ¡need ¡

slide-13
SLIDE 13

But ¡first,… ¡

¡What ¡is ¡authen'c ¡

learning? ¡

slide-14
SLIDE 14

9 ¡elements ¡of ¡authen'c ¡learning ¡

  • Authen'c ¡context ¡
  • Authen'c ¡ac'vity ¡
  • Expert ¡performances ¡
  • Mul'ple ¡perspec'ves ¡
  • Collabora'on ¡
  • Reflec'on ¡ ¡
  • Ar'cula'on ¡
  • Coaching ¡and ¡scaffolding ¡
  • Authen'c ¡assessment ¡
slide-15
SLIDE 15

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Authentic context

Authen'c ¡context ¡

  • A ¡physical ¡or ¡virtual ¡

environment ¡that ¡reflects ¡the ¡ way ¡the ¡knowledge ¡will ¡be ¡ used ¡in ¡real-­‑life ¡

slide-16
SLIDE 16

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Authen'c ¡tasks ¡

  • Tasks ¡and ¡ac'vi'es ¡that ¡

have ¡real-­‑world ¡ relevance ¡

Authentic tasks

slide-17
SLIDE 17

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Expert ¡performance ¡

  • Access ¡to ¡expert ¡

thinking ¡and ¡the ¡ modelling ¡of ¡processes ¡ ¡

Expert performance

slide-18
SLIDE 18

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Mul'ple ¡perspec'ves ¡

  • Different ¡perspec'ves ¡

from ¡different ¡points ¡of ¡ view ¡

Multiple perspectives

slide-19
SLIDE 19

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Collabora'on ¡

¡Joint ¡problem ¡solving ¡ and ¡social ¡support ¡

Collaboration

slide-20
SLIDE 20

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Ar'cula'on ¡

¡Opportuni'es ¡for ¡ students ¡to ¡speak ¡and ¡ write ¡about ¡their ¡ growing ¡understanding ¡

Articulation

slide-21
SLIDE 21

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Reflec'on ¡

  • Opportunity ¡to ¡think ¡

about, ¡reflect ¡and ¡ discuss ¡choices ¡

Reflection

slide-22
SLIDE 22

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Scaffolding ¡and ¡coaching ¡

  • Support ¡provided ¡to ¡the ¡

learner ¡by ¡the ¡teacher ¡ and ¡others ¡in ¡the ¡learning ¡ environment ¡

Scaffolding

slide-23
SLIDE 23

Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment

Authen'c ¡assessment ¡

  • Assessment ¡is ¡integrated ¡

with ¡the ¡task ¡rather ¡than ¡ separate ¡tes'ng ¡

Authentic assessment

slide-24
SLIDE 24

So ¡what ¡is ¡authen'c ¡assessment? ¡

slide-25
SLIDE 25

Focusing ¡on ¡assessment ¡ The ¡design ¡of ¡educa+ve ¡assessment ¡tasks ¡ could ¡be ¡considered ¡to ¡be ¡the ¡most ¡important ¡ element ¡of ¡ter+ary ¡teaching

(Angelo, ¡1999) ¡

slide-26
SLIDE 26

It’s ¡the ¡task ¡that ¡maWers ¡most! ¡

¡ ¡

Thus …

slide-27
SLIDE 27
slide-28
SLIDE 28

Why ¡authen'city ¡in ¡assessment? ¡ ¡ ¡For ¡me ¡this ¡means… ¡

slide-29
SLIDE 29
slide-30
SLIDE 30

Context ¡factors ¡

  • Requires ¡fidelity ¡of ¡the ¡task ¡to ¡the ¡

condi'ons ¡under ¡which ¡the ¡performance ¡ would ¡normally ¡occur ¡

  • Requires ¡connectedness ¡and ¡transfer ¡to ¡the ¡

world ¡beyond ¡the ¡classroom ¡

Assessment is most likely to be authentic if it satisfies the following:

slide-31
SLIDE 31

Student ¡factors: ¡think ¡Bloom! ¡

  • Requires ¡problem ¡solving ¡skills ¡and ¡higher ¡order ¡thinking ¡ ¡

¡

  • Requires ¡produc2on ¡of ¡knowledge ¡rather ¡than ¡reproduc'on ¡ ¡

¡

  • Requires ¡significant ¡student ¡'me ¡and ¡effort ¡in ¡collabora2on ¡with ¡others ¡ ¡

¡

  • Is ¡characterised ¡by ¡substan've ¡conversa2on ¡ ¡

¡

  • Requires ¡students ¡to ¡be ¡effec've ¡performers ¡with ¡acquired ¡knowledge, ¡

and ¡to ¡craR ¡polished, ¡performances ¡or ¡products ¡ ¡

slide-32
SLIDE 32

Task ¡factors: ¡think ¡student!

  • S'mulates ¡a ¡wide ¡range ¡of ¡ac2ve ¡responses ¡ ¡

¡

  • Involves ¡complex, ¡ill ¡structured ¡challenges ¡that ¡require ¡

judgment, ¡mul'ple ¡steps, ¡and ¡a ¡full ¡array ¡of ¡tasks ¡ ¡ ¡

  • Requires ¡the ¡assessment ¡to ¡be ¡seamlessly ¡integrated ¡with ¡

the ¡ac'vity ¡

slide-33
SLIDE 33

Indicators ¡

  • Provides ¡mul2ple ¡indicators ¡of ¡learning ¡

¡

  • Achieves ¡validity ¡and ¡reliability ¡with ¡appropriate ¡

criteria ¡for ¡scoring ¡varied ¡products ¡

slide-34
SLIDE 34

What ¡are ¡the ¡8 ¡Cri'cal ¡Elements ¡of ¡ ¡ authen'c ¡assessment? ¡

  • What ¡does ¡the ¡literature ¡tell ¡us? ¡
  • What ¡does ¡this ¡look ¡like ¡in ¡prac'ce? ¡

– i.e. ¡How ¡do ¡I ¡apply ¡it ¡to ¡instruc'onal/educa'onal ¡ design? ¡

slide-35
SLIDE 35

What ¡are ¡the ¡8 ¡Cri'cal ¡Elements ¡of ¡ ¡authen'c ¡assessment? ¡

  • An ¡authen'c ¡assessment ¡should ¡be ¡challenging ¡
  • The ¡outcome ¡of ¡an ¡authen'c ¡assessment ¡should ¡be ¡

in ¡the ¡form ¡of ¡a ¡performance ¡or ¡product ¡(outcome) ¡

  • Authen'c ¡assessment ¡design ¡should ¡ensure ¡transfer ¡
  • f ¡knowledge ¡
  • Metacogni'on ¡as ¡a ¡component ¡of ¡authen'c ¡

assessment ¡

slide-36
SLIDE 36

What ¡are ¡the ¡8 ¡Cri'cal ¡Elements ¡of ¡ ¡ authen'c ¡assessment? ¡(Contd) ¡

  • The ¡importance ¡of ¡a ¡requirement ¡to ¡ensure ¡accuracy ¡

in ¡assessment ¡performance ¡

  • The ¡role ¡of ¡the ¡assessment ¡environment ¡and ¡the ¡

tools ¡used ¡to ¡deliver ¡the ¡assessment ¡task ¡

  • The ¡importance ¡of ¡formally ¡designing ¡in ¡an ¡
  • pportunity ¡to ¡discuss ¡and ¡provide ¡feedback ¡
  • The ¡value ¡of ¡collabora'on ¡
slide-37
SLIDE 37
  • The ¡‘elements’ ¡as ¡‘ques'ons’ ¡

– Why? ¡ – How? ¡ – What ¡do ¡they ¡look ¡like? ¡

slide-38
SLIDE 38

What ¡are ¡the ¡8 ¡Cri'cal ¡Ques+ons ¡of ¡ ¡ authen'c ¡assessment? ¡ ¡

Thus, ¡the ¡refined ¡eight ¡key ¡ques'on ¡become: ¡

  • To ¡what ¡extent ¡does ¡the ¡assessment ¡ac'vity ¡challenge ¡the ¡

student? ¡

  • Is ¡a ¡performance, ¡or ¡product, ¡required ¡as ¡a ¡final ¡assessment ¡
  • utcome? ¡
  • Does ¡the ¡assessment ¡ac'vity ¡require ¡that ¡transfer ¡of ¡learning ¡

has ¡occurred, ¡by ¡means ¡of ¡demonstra'on ¡of ¡skill? ¡

  • Does ¡the ¡assessment ¡ac'vity ¡require ¡that ¡metacogni+on ¡is ¡

demonstrated? ¡

slide-39
SLIDE 39

What ¡are ¡the ¡8 ¡Cri'cal ¡Ques+ons ¡of ¡ ¡ authen'c ¡assessment? ¡(contd.) ¡

  • Does ¡the ¡assessment ¡require ¡a ¡product ¡or ¡performance ¡that ¡

could ¡be ¡recognised ¡as ¡authen'c ¡by ¡a ¡client ¡or ¡stakeholder? ¡ (accuracy) ¡

  • Is ¡fidelity ¡required ¡in ¡the ¡assessment ¡environment? ¡And ¡the ¡

assessment ¡tools ¡(actual ¡or ¡simulated)? ¡

  • Does ¡the ¡assessment ¡ac'vity ¡require ¡discussion ¡and ¡

feedback? ¡

  • Does ¡the ¡assessment ¡ac'vity ¡require ¡that ¡students ¡

collaborate? ¡

slide-40
SLIDE 40

Workshop… ¡

slide-41
SLIDE 41

References ¡

  • Ashford-­‑Rowe, ¡K.H., ¡Herrington, ¡J. ¡and ¡Brown, ¡C. ¡Establishing ¡

the ¡cri+cal ¡elements ¡that ¡determine ¡authen+c ¡assessment, ¡ Assessment ¡& ¡Evalua'on ¡in ¡Higher ¡Educa'on, ¡DOI: ¡ 10.1080/02602938.2013.819566 ¡ ¡ ¡

To ¡link ¡to ¡this ¡ar2cle: ¡hMp://dx.doi.org/10.1080/02602938.2013.819566 ¡

slide-42
SLIDE 42

A ¡guide ¡to ¡authen'c ¡e-­‑learning ¡ Authored ¡book: ¡ ¡ ¡ ¡ A ¡guide ¡to ¡ authen+c ¡e-­‑ learning ¡

Herrington, ¡Reeves ¡& ¡Oliver, ¡ ¡2010 ¡

slide-43
SLIDE 43

Presenta'on ¡website ¡

Downloadable papers, links to sites and resources

Link from conference website OR

http://web.me.com/ janherrington/ AuthenticAssessment/

slide-44
SLIDE 44

¡

AUTHENTIC LEARNING COLLOQUIUM ¡

¡

¡

¡

The ¡misapprehensions ¡of ¡authen'c ¡ learning ¡ ¡OR ¡ ¡ Rupert ¡Murdoch’s ¡guide ¡ ¡ to ¡authen'c ¡learning ¡

¡

¡

slide-45
SLIDE 45

Ques'ons ¡