Implemen'ng and Assessing Effec've Professional Learning - - PDF document

10/5/15 ¡ 1 ¡

Implemen'ng ¡and ¡ Assessing ¡Effec've ¡ Professional ¡Learning ¡

Joellen ¡Killion ¡ Senior ¡Advisor ¡ ¡ Learning ¡Forward ¡ 303-­‑520-­‑6790 ¡ Joellen.killion@learningforward.org ¡ www.learningforward.org ¡ ¡ ¡

Outcomes ¡

ParHcipants ¡will ¡ ¡

Ø Examine ¡aLributes ¡of ¡and ¡designs ¡for ¡effecHve ¡ professional ¡learning. ¡ ¡ Ø Understand ¡the ¡necessity ¡of ¡a ¡theory ¡of ¡change ¡in ¡ planning ¡and ¡assessing ¡the ¡effecHveness ¡of ¡ professional ¡learning. ¡ Ø Acquire ¡tool ¡for ¡defining ¡outputs, ¡outcomes, ¡and ¡ goals ¡of ¡professional ¡learning ¡at ¡various ¡stages ¡of ¡ implementaHon ¡(early, ¡rouHne, ¡advanced, ¡ refocused). ¡

10/5/15 ¡ 2 ¡ www.learningforward.org/standards ¡

Standards ¡for ¡Professional ¡Learning ¡

Ø Define ¡the ¡research-­‑ ¡and ¡evidence-­‑based ¡ aLributes ¡of ¡effecHve ¡professional ¡learning ¡ Ø Guide ¡the ¡planning, ¡designing, ¡ implemenHng, ¡and ¡evaluaHng ¡professional ¡ learning ¡ Ø Serve ¡as ¡criteria ¡for ¡measuring ¡the ¡quality ¡

• f ¡professional ¡learning ¡

10/5/15 ¡ 3 ¡

Professional ¡Learning ¡ ¡ Theory ¡of ¡Change ¡

• 1. ¡Standards-­‑

based ¡ professional ¡ learning ¡

• 2. ¡Changes ¡in ¡

educator ¡ knowledge, ¡ skills, ¡and ¡ disposiHons ¡

• 4. ¡Changes ¡in ¡

student ¡ results ¡

• 3. ¡Changes ¡in ¡

educator ¡ pracHce ¡

5 ¡

Adapted ¡from ¡Laura ¡Desimone, ¡Standards ¡of ¡Professional ¡Learning, ¡p. ¡16. ¡

Learning ¡Designs ¡Standard ¡ ¡

Professional ¡learning ¡that ¡increases ¡educator ¡ effecHveness ¡and ¡results ¡for ¡all ¡students ¡ integrates ¡theories, ¡research, ¡and ¡models ¡of ¡ human ¡learning ¡to ¡achieve ¡its ¡intended ¡

• utcomes. ¡

Ø Apply ¡learning ¡theories, ¡ research, ¡and ¡models ¡ Ø Select ¡learning ¡designs ¡ Ø Promote ¡acHve ¡engagement ¡

10/5/15 ¡ 4 ¡

Backmapping ¡Model ¡for ¡PL ¡

Killion ¡& ¡Roy, ¡2009. ¡Becoming ¡a ¡Learning ¡School ¡ A ¡Learning ¡Design ¡Anatomy ¡ (‘the Anatomy’) hLp://www.aitsl.edu.au/docs/default-­‑source/default-­‑document-­‑library/ designing_professional_learning_report.pdf?sfvrsn=4 ¡

10/5/15 ¡ 5 ¡

Current problems and limitations of program evaluation lie more with lack of adequate conceptual framework of the program than with methodological weakness.

— Chen, 1990

Challenge of Assessing PL

10 ¡

10

Change ¡= ¡Learning ¡

10/5/15 ¡ 6 ¡

• Knowledge
• Attitude
• Skill
• Aspiration
• Behavior

Types of Change

KASAB

Knowledge Conceptual understanding of information, theories, principles, and research Attitude Beliefs about the value of particular information or strategies Skill Strategies and processes to apply knowledge Aspiration Desires, or internal motivation, to engage in a particular practice Behavior Consistent application of knowledge and skills

10/5/15 ¡ 7 ¡

Theory of Change = Conceptual Framework

• IdenHfies ¡the ¡components ¡of ¡a ¡program ¡

(what ¡the ¡program ¡does) ¡

• Specifies ¡the ¡relaHonship ¡among ¡the ¡

components ¡to ¡explain ¡how ¡the ¡change ¡

• ccurs ¡(sequence ¡of ¡acHons) ¡
• Delineates ¡the ¡underlying ¡assumpHons ¡

upon ¡which ¡the ¡program ¡is ¡based ¡

¡

Implementa'on ¡Standard ¡ ¡

Professional ¡learning ¡that ¡ increases ¡educator ¡effecHveness ¡ and ¡results ¡for ¡all ¡students ¡applies ¡ research ¡on ¡change ¡and ¡sustains ¡ support ¡for ¡implementaHon ¡of ¡ professional ¡learning ¡for ¡long-­‑term ¡

• change. ¡

Ø Apply ¡change ¡research. ¡ Ø Sustain ¡implementaHon. ¡ Ø Provide ¡construcHve ¡feedback. ¡

10/5/15 ¡ 8 ¡

Stages ¡of ¡Behavior ¡Rehearsal ¡

• Model ¡with ¡implementaHon ¡
• Mechanical ¡implementaHon ¡
• Guided, ¡frequent ¡implementaHon ¡with ¡feedback ¡
• Scaffolded, ¡intermiLent ¡implementaHon ¡with ¡

feedback ¡

• Independent ¡implementaHon ¡with ¡feedback ¡
• Independent ¡implementaHon ¡with ¡self-­‑generated ¡

feedback ¡

• RouHne ¡implementaHon ¡
• Refocused ¡implementaHon ¡

¡ ¡ ¡ ¡

Novice ¡ Expert ¡

Sustained support is ESSENTIAL to ensure Implementation of learning.

¡

Sustained ¡support ¡is ¡ESSENTIAL ¡to ¡ensure ¡ implementaHon ¡of ¡learning. ¡ ¡

10/5/15 ¡ 9 ¡

Learning Designs & Impact

Learning Designs Concept Understanding Skill Attainment Application/ Problem Solving

Presentation

85% 15% 5-10%

Modeling

85% 18% 5-10%

Practice & Feedback

85% 80% 10-15%

Coaching/ Study Teams

90% 90% 80-90%

Bruce Joyce and Beverly Showers

¡

Black Box Evaluations

Input Output Input Output

Glass Box Evaluations

?

10/5/15 ¡ 10 ¡

¡

Assessing change requires making comparisons.

10/5/15 ¡ 11 ¡

• Individual (pre to post)
• Cohort Group (pre to post)
• Panel Group (over time)
• Selected/Constructed (group to group)
• Random
• Matched
• Generic

Types of Comparisons

Attribution vs. Contribution

What do these terms mean in relationship to assessing the effectiveness of professional learning?

10/5/15 ¡ 12 ¡

Wrap-­‑up ¡

I ¡used ¡to ¡ ________________________________________ ¡ and/but ¡now ¡I ¡ ________________________________________. ¡

Think ¡about ¡your ¡learning ¡today. ¡What ¡ and ¡how ¡have ¡you ¡learned? ¡Complete ¡ the ¡following ¡sentence ¡frame ¡(you ¡may ¡ create ¡several ¡sentences ¡using ¡the ¡ frame). ¡Prepare ¡to ¡share ¡it ¡with ¡others. ¡

¡

800-727-7288 www.learningforward.org 61

STANDARDS for PROFESSIONAL LEARNING

Standards summary

Standards for Professional Learning Core elements of each standard

LEARNING COMMUNITIES: Professional learning that increases educator effectiveness and results for all students occurs within learning communities committed to continuous improvement, collective responsibility, and goal alignment.

• Engage in continuous

improvement.

• Develop collective responsibility.
• Create alignment and

accountability. LEADERSHIP: Professional learning that increases educator effectiveness and results for all students requires skillful leaders who develop capacity, advocate, and create support systems for professional learning.

• Develop capacity for learning and

leading.

• Advocate for professional learning.
• Create support systems and

structures. RESOURCES: Professional learning that increases educator effectiveness and results for all students requires prioritizing, monitoring, and coordinating resources for educator learning.

• Prioritize human, fjscal, material,

technology, and time resources.

• Monitor resources.
• Coordinate resources.

DATA: Professional learning that increases educator effectiveness and results for all students uses a variety of sources and types of student, educator, and system data to plan, assess, and evaluate professional learning.

• Analyze student, educator, and

system data.

• Assess progress.
• Evaluate professional learning.

LEARNING DESIGNS: Professional learning that increases educator effectiveness and results for all students integrates theories, research, and models of human learning to achieve its intended outcomes.

• Apply learning theories, research,

and models.

• Select learning designs.
• Promote active engagement.

IMPLEMENTATION: Professional learning that increases educator effectiveness and results for all students applies research on change and sustains support for implementation of professional learning for long-term change.

• Apply change research.
• Sustain implementation.
• Provide constructive feedback.

OUTCOMES: Professional learning that increases educator effectiveness and results for all students aligns its outcomes with educator performance and student curriculum standards.

• Meet performance standards.
• Address learning outcomes.
• Build coherence.