Authen'c learning and assessment As many ques+ons as answers! - - PowerPoint PPT Presentation
Authen'c learning and assessment As many ques+ons as answers! - - PowerPoint PPT Presentation
Authen'c learning and assessment As many ques+ons as answers! Professor Kevin Ashford-Rowe Synopsis This presenta'on will consider the role and value of authen2city as a
Synopsis ¡
This ¡presenta'on ¡will ¡consider ¡the ¡role ¡and ¡value ¡
- f ¡‘authen2city’ ¡as ¡a ¡factor ¡in ¡the ¡design ¡and ¡
development ¡of ¡fair, ¡valid, ¡reliable, ¡transparent ¡and ¡ relevant ¡21st ¡Century ¡learning, ¡teaching ¡and ¡ assessment ¡experiences. ¡It ¡will ¡seek ¡to ¡describe ¡ both ¡the ¡broader ¡Higher ¡Educa2on ¡context ¡and ¡ detail ¡some ¡of ¡the ¡factors ¡important ¡in ¡iden'fying ¡ how ¡authen2city ¡might ¡be ¡applied. ¡
Context ¡
- Time ¡of ¡major ¡transforma'on ¡and ¡change ¡
¡
- Exist ¡within ¡a ¡Global ¡Economy ¡
– Increased ¡interna'onal ¡compe''on ¡ Rate ¡of ¡technology ¡uptake ¡and ¡transforma'on ¡ – eLearning ¡now ¡becoming ¡mLearning..! ¡
3 ¡
Context ¡con2nues… ¡
Background ¡
- Economic ¡history ¡perspec've ¡
– Agrarian ¡to ¡Industrial ¡Age ¡(the ¡move ¡from ¡the ¡CoMage ¡industry ¡to ¡the ¡factory) ¡ – Industrial ¡to ¡Informa'on ¡Age ¡(the ¡move ¡out ¡of ¡the ¡factory ¡to ¡the ¡open ¡network) ¡
- Industrial ¡Age ¡educa'on ¡for ¡Industrial ¡Age ¡students ¡
- Informa'on ¡Age ¡educa'on ¡for ¡Informa'on ¡Age ¡students ¡
¡
- University ¡educa'on ¡increasingly ¡about ¡developing ¡21st ¡Century ¡professionals ¡who ¡can ¡
access ¡and ¡navigate ¡the ¡informa'on ¡mountain ¡and ¡use ¡valid, ¡reliable ¡oRen ¡‘just ¡in ¡'me’ ¡ informa'on ¡to ¡inform ¡processes ¡and ¡decision ¡making ¡ ¡
- Learning ¡and ¡teaching ¡ac'vi'es ¡and ¡environments ¡need ¡to ¡support ¡increasingly ¡
collabora've ¡ac'vity ¡in ¡a ¡team ¡based ¡project ¡group ¡approach ¡ ¡ – Where ¡spaces ¡need ¡to ¡be ¡
- Agile ¡
- Flexible ¡
¡
¡
Context ¡contd. ¡
- Reported ¡change ¡in ¡the ¡student ¡experience: ¡
– Students ¡(school ¡leavers ¡and ¡mature ¡aged) ¡repor'ng ¡ that: ¡
- Your ¡teachers ¡don’t ¡use ¡enough ¡technology ¡in ¡their ¡
teaching ¡and, ¡when ¡they ¡do, ¡they ¡don’t ¡use ¡it ¡well ¡ enough! ¡ – Changes ¡in ¡the ¡way ¡children ¡educated ¡in ¡schools ¡
- K-‑12 ¡– ¡Situated ¡and ¡authen'c ¡learning ¡
experiences, ¡more ¡construc'vist ¡approach ¡ ¡
5 ¡
Authen'c ¡Learning ¡and ¡Assessment ¡ Innova'on ¡vs. ¡Hygiene ¡
- From ¡the ¡student’s ¡perspec've ¡
– It’s ¡about ¡their ¡learning ¡experience ¡
- How ¡and ¡when ¡it ¡is ¡measured ¡
- How ¡closely ¡does ¡it ¡resemble ¡prac'ce ¡
¡
- From ¡the ¡teacher’s ¡perspec've ¡
– It’s ¡about ¡mee'ng ¡the ¡expecta'ons ¡of ¡the ¡ ¡student ¡
- What ¡do ¡you ¡want ¡from ¡me? ¡
- What ¡do ¡you ¡need ¡from ¡me? ¡
¡
- From ¡the ¡University’s ¡perspec've ¡
– It’s ¡about ¡providing ¡students ¡with ¡a ¡consistent ¡and ¡quality ¡assured ¡and ¡increasingly ¡a ¡situated ¡ and ¡authen'c ¡learning ¡and ¡teaching ¡experience ¡
- Consistent ¡with ¡the ¡experience ¡that ¡they ¡receive ¡in ¡other ¡areas ¡of ¡their ¡life ¡
- Consistent ¡with ¡the ¡ways ¡in ¡which ¡they ¡have ¡been ¡taught ¡to ¡learn ¡
- At ¡least ¡consistent ¡with ¡the ¡experience ¡compe'tors ¡are ¡providing ¡
– (tradi'onal ¡and ¡non ¡tradi'onal/local, ¡na'onal ¡& ¡global) ¡
6 ¡
And, ¡remember ¡this! ¡ ¡ ¡
¡ Nothing ¡that ¡we ¡do ¡to, ¡or ¡for, ¡our ¡students ¡is ¡more ¡important ¡ than ¡our ¡assessment ¡of ¡their ¡work ¡and ¡the ¡feedback ¡we ¡give ¡ them ¡on ¡it. ¡The ¡results ¡of ¡our ¡assessment ¡influence ¡our ¡ students ¡for ¡the ¡rest ¡of ¡their ¡lives ¡and ¡careers… ¡ ¡– ¡fine ¡if ¡we ¡get ¡it ¡right, ¡but ¡unthinkable ¡if ¡we ¡get ¡it ¡wrong. ¡ ¡
Race, ¡Brown ¡and ¡Smith ¡(2005), ¡500 ¡Tips ¡on ¡Assessment ¡ JISC ¡-‑ ¡Effec8ve ¡Assessment ¡in ¡a ¡Digital ¡Age ¡(2010) ¡
¡
¡ ¡
Why ¡the ¡move ¡to ¡authen'c ¡learning ¡and ¡ assessment? ¡
An ¡employer ¡speaks: ¡ ¡ Let’s ¡bring ¡classrooms ¡into ¡the ¡21st ¡century ¡
¡We ¡need ¡to ¡tear ¡down ¡an ¡educa+on ¡system ¡designed ¡for ¡ the ¡19th ¡century ¡– ¡and ¡replace ¡it ¡with ¡one ¡that’s ¡suited ¡ for ¡the ¡21st. ¡
¡ ¡ ¡ Rupert ¡Murdoch's ¡Keynote ¡Address ¡to ¡the ¡Founda+on ¡for ¡Excellence ¡in ¡Educa+on ¡ Summit ¡on ¡October ¡14, ¡2011 ¡in ¡San ¡Francisco, ¡California. ¡
¡
Rupert ¡Murdoch: ¡Let’s ¡bring ¡classrooms ¡into ¡the ¡21st ¡century ¡
¡You ¡don’t ¡get ¡change ¡by ¡plugging ¡in ¡computers ¡to ¡ schools ¡designed ¡for ¡the ¡industrial ¡age. ¡You ¡get ¡it ¡ by ¡deploying ¡technology ¡that ¡re-‑writes ¡the ¡rules ¡
- f ¡the ¡game ¡by ¡centering ¡learning ¡around ¡the ¡
- learner. ¡
What ¡are ¡we ¡teaching? ¡
Aligning design with Bloom's upper levels encourages higher-order thinking that is
- ne of the essential skills for the 21stCentury learner
Where ¡do ¡we ¡teach ¡it? ¡ ¡ The ¡physical ¡learning ¡and ¡teaching ¡environment ¡ Maslow’s ¡Hierarchy ¡of ¡human ¡need ¡
But ¡first,… ¡
¡What ¡is ¡authen'c ¡
learning? ¡
9 ¡elements ¡of ¡authen'c ¡learning ¡
- Authen'c ¡context ¡
- Authen'c ¡ac'vity ¡
- Expert ¡performances ¡
- Mul'ple ¡perspec'ves ¡
- Collabora'on ¡
- Reflec'on ¡ ¡
- Ar'cula'on ¡
- Coaching ¡and ¡scaffolding ¡
- Authen'c ¡assessment ¡
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Authentic context
Authen'c ¡context ¡
- A ¡physical ¡or ¡virtual ¡
environment ¡that ¡reflects ¡the ¡ way ¡the ¡knowledge ¡will ¡be ¡ used ¡in ¡real-‑life ¡
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Authen'c ¡tasks ¡
- Tasks ¡and ¡ac'vi'es ¡that ¡
have ¡real-‑world ¡ relevance ¡
Authentic tasks
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Expert ¡performance ¡
- Access ¡to ¡expert ¡
thinking ¡and ¡the ¡ modelling ¡of ¡processes ¡ ¡
Expert performance
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Mul'ple ¡perspec'ves ¡
- Different ¡perspec'ves ¡
from ¡different ¡points ¡of ¡ view ¡
Multiple perspectives
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Collabora'on ¡
¡Joint ¡problem ¡solving ¡ and ¡social ¡support ¡
Collaboration
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Ar'cula'on ¡
¡Opportuni'es ¡for ¡ students ¡to ¡speak ¡and ¡ write ¡about ¡their ¡ growing ¡understanding ¡
Articulation
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Reflec'on ¡
- Opportunity ¡to ¡think ¡
about, ¡reflect ¡and ¡ discuss ¡choices ¡
Reflection
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Scaffolding ¡and ¡coaching ¡
- Support ¡provided ¡to ¡the ¡
learner ¡by ¡the ¡teacher ¡ and ¡others ¡in ¡the ¡learning ¡ environment ¡
Scaffolding
Authentic context Authentic task Expert performance Multiple views Collaboration Articulation Reflection Scaffolding Authentic assessment
Authen'c ¡assessment ¡
- Assessment ¡is ¡integrated ¡
with ¡the ¡task ¡rather ¡than ¡ separate ¡tes'ng ¡
Authentic assessment
So ¡what ¡is ¡authen'c ¡assessment? ¡
Focusing ¡on ¡assessment ¡ The ¡design ¡of ¡educa+ve ¡assessment ¡tasks ¡ could ¡be ¡considered ¡to ¡be ¡the ¡most ¡important ¡ element ¡of ¡ter+ary ¡teaching
(Angelo, ¡1999) ¡
It’s ¡the ¡task ¡that ¡maWers ¡most! ¡
¡ ¡
Thus …
Why ¡authen'city ¡in ¡assessment? ¡ ¡ ¡For ¡me ¡this ¡means… ¡
Context ¡factors ¡
- Requires ¡fidelity ¡of ¡the ¡task ¡to ¡the ¡
condi'ons ¡under ¡which ¡the ¡performance ¡ would ¡normally ¡occur ¡
- Requires ¡connectedness ¡and ¡transfer ¡to ¡the ¡
world ¡beyond ¡the ¡classroom ¡
Assessment is most likely to be authentic if it satisfies the following:
Student ¡factors: ¡think ¡Bloom! ¡
- Requires ¡problem ¡solving ¡skills ¡and ¡higher ¡order ¡thinking ¡ ¡
¡
- Requires ¡produc2on ¡of ¡knowledge ¡rather ¡than ¡reproduc'on ¡ ¡
¡
- Requires ¡significant ¡student ¡'me ¡and ¡effort ¡in ¡collabora2on ¡with ¡others ¡ ¡
¡
- Is ¡characterised ¡by ¡substan've ¡conversa2on ¡ ¡
¡
- Requires ¡students ¡to ¡be ¡effec've ¡performers ¡with ¡acquired ¡knowledge, ¡
and ¡to ¡craR ¡polished, ¡performances ¡or ¡products ¡ ¡
Task ¡factors: ¡think ¡student!
- S'mulates ¡a ¡wide ¡range ¡of ¡ac2ve ¡responses ¡ ¡
¡
- Involves ¡complex, ¡ill ¡structured ¡challenges ¡that ¡require ¡
judgment, ¡mul'ple ¡steps, ¡and ¡a ¡full ¡array ¡of ¡tasks ¡ ¡ ¡
- Requires ¡the ¡assessment ¡to ¡be ¡seamlessly ¡integrated ¡with ¡
the ¡ac'vity ¡
Indicators ¡
- Provides ¡mul2ple ¡indicators ¡of ¡learning ¡
¡
- Achieves ¡validity ¡and ¡reliability ¡with ¡appropriate ¡
criteria ¡for ¡scoring ¡varied ¡products ¡
What ¡are ¡the ¡8 ¡Cri'cal ¡Elements ¡of ¡ ¡ authen'c ¡assessment? ¡
- What ¡does ¡the ¡literature ¡tell ¡us? ¡
- What ¡does ¡this ¡look ¡like ¡in ¡prac'ce? ¡
– i.e. ¡How ¡do ¡I ¡apply ¡it ¡to ¡instruc'onal/educa'onal ¡ design? ¡
What ¡are ¡the ¡8 ¡Cri'cal ¡Elements ¡of ¡ ¡authen'c ¡assessment? ¡
- An ¡authen'c ¡assessment ¡should ¡be ¡challenging ¡
- The ¡outcome ¡of ¡an ¡authen'c ¡assessment ¡should ¡be ¡
in ¡the ¡form ¡of ¡a ¡performance ¡or ¡product ¡(outcome) ¡
- Authen'c ¡assessment ¡design ¡should ¡ensure ¡transfer ¡
- f ¡knowledge ¡
- Metacogni'on ¡as ¡a ¡component ¡of ¡authen'c ¡
assessment ¡
What ¡are ¡the ¡8 ¡Cri'cal ¡Elements ¡of ¡ ¡ authen'c ¡assessment? ¡(Contd) ¡
- The ¡importance ¡of ¡a ¡requirement ¡to ¡ensure ¡accuracy ¡
in ¡assessment ¡performance ¡
- The ¡role ¡of ¡the ¡assessment ¡environment ¡and ¡the ¡
tools ¡used ¡to ¡deliver ¡the ¡assessment ¡task ¡
- The ¡importance ¡of ¡formally ¡designing ¡in ¡an ¡
- pportunity ¡to ¡discuss ¡and ¡provide ¡feedback ¡
- The ¡value ¡of ¡collabora'on ¡
- The ¡‘elements’ ¡as ¡‘ques'ons’ ¡
– Why? ¡ – How? ¡ – What ¡do ¡they ¡look ¡like? ¡
What ¡are ¡the ¡8 ¡Cri'cal ¡Ques+ons ¡of ¡ ¡ authen'c ¡assessment? ¡ ¡
Thus, ¡the ¡refined ¡eight ¡key ¡ques'on ¡become: ¡
- To ¡what ¡extent ¡does ¡the ¡assessment ¡ac'vity ¡challenge ¡the ¡
student? ¡
- Is ¡a ¡performance, ¡or ¡product, ¡required ¡as ¡a ¡final ¡assessment ¡
- utcome? ¡
- Does ¡the ¡assessment ¡ac'vity ¡require ¡that ¡transfer ¡of ¡learning ¡
has ¡occurred, ¡by ¡means ¡of ¡demonstra'on ¡of ¡skill? ¡
- Does ¡the ¡assessment ¡ac'vity ¡require ¡that ¡metacogni+on ¡is ¡
demonstrated? ¡
What ¡are ¡the ¡8 ¡Cri'cal ¡Ques+ons ¡of ¡ ¡ authen'c ¡assessment? ¡(contd.) ¡
- Does ¡the ¡assessment ¡require ¡a ¡product ¡or ¡performance ¡that ¡
could ¡be ¡recognised ¡as ¡authen'c ¡by ¡a ¡client ¡or ¡stakeholder? ¡ (accuracy) ¡
- Is ¡fidelity ¡required ¡in ¡the ¡assessment ¡environment? ¡And ¡the ¡
assessment ¡tools ¡(actual ¡or ¡simulated)? ¡
- Does ¡the ¡assessment ¡ac'vity ¡require ¡discussion ¡and ¡
feedback? ¡
- Does ¡the ¡assessment ¡ac'vity ¡require ¡that ¡students ¡
collaborate? ¡
Workshop… ¡
References ¡
- Ashford-‑Rowe, ¡K.H., ¡Herrington, ¡J. ¡and ¡Brown, ¡C. ¡Establishing ¡
the ¡cri+cal ¡elements ¡that ¡determine ¡authen+c ¡assessment, ¡ Assessment ¡& ¡Evalua'on ¡in ¡Higher ¡Educa'on, ¡DOI: ¡ 10.1080/02602938.2013.819566 ¡ ¡ ¡
To ¡link ¡to ¡this ¡ar2cle: ¡hMp://dx.doi.org/10.1080/02602938.2013.819566 ¡
A ¡guide ¡to ¡authen'c ¡e-‑learning ¡ Authored ¡book: ¡ ¡ ¡ ¡ A ¡guide ¡to ¡ authen+c ¡e-‑ learning ¡
Herrington, ¡Reeves ¡& ¡Oliver, ¡ ¡2010 ¡
Presenta'on ¡website ¡
Downloadable papers, links to sites and resources
Link from conference website OR
http://web.me.com/ janherrington/ AuthenticAssessment/
¡
AUTHENTIC LEARNING COLLOQUIUM ¡