Assessment in Technology Education

1. 기술 교육 평가 전략 Assessment in Technology Education 기술과 교육 평가 최유현 교수

2. 평가를 제자리로 • Evaluation and Assessment ? • 인간 이해와 인간 규정 ? • Feedback and Feedfoward ? • 한국종합예술학교 이야기 ? 기술과 교육 평가 최유현 교수

3. Alternative assessment Portfolio assessment Direct assessment Performance- based assessment 새로운 평가 용어 Authentic assessment Outcome-based assessment Process-oriended assessment Holistic assessment 기술과 교육 평가 최유현 교수

4. 평가 동향 Informal tests not formal test Assessing of process During instruction Integrated skills not isolate skills Considerable feedback Student self-evaluation Many correct answers not single answer Public standard and criteria Authentic tasks not paper and pencil test

5. Javaris(1993) 기술과 교육 평가 방법Collecting the evidence • 교사의 관찰 (teacher observation) • 학생들의 자기 평가(pupil's self-assessment) • 작품 숙고적 평가(considering product) cf Rating products • 지필 보고서, 검사, 정리(written reports, tests and summaries) 기술과 교육 평가 최유현 교수

6. Javaris(1993) 기술과 교육 평가 방법Collecting the evidence • 그림 및 제도 도면(diagram and drawings) • 개념 지도 그리기(concept mapping) • 개별적 토의 및 면접(discussions and interviews with individual children) • 학급 전체 혹은 집단 토의(whole class or group discussions) • 사진, 테이프, 비디오의 활용 (use of photographs, tapes, video) 기술과 교육 평가 최유현 교수

7. International Technology Education Association’sTechnology for All Americans Project Funded by: National Science Foundation (NSF) National Aeronautics and Space Administration (NASA) 기술과 교육 평가 최유현 교수

8. ITEA TfAA제 1 단계 (1996) • Rationale and Structure —Phase 1 기술과 교육 평가 최유현 교수

9. 제 2 단계 (2000) Standards for Technological Literacy: Content for the Study of Technology 기술과 교육 평가 최유현 교수

10. Structure of the Standards Standards Benchmarks K-2 3-5 6-8 9-12 *The characteristics and scope of technology *The core concepts of technology *The relationships among technologies and the connections between technology and other fields of study The Nature of Technology *The cultural, social, economic, and political effects of technology *The effects of technology on the environment *The role of society in the development and use of technology *The influence of technology on history Technology and Society Design *The attributes of design *Engineering design *The role of troubleshooting, research and development, invention and innovation, and experimentation in problem solving Abilities for A Technological World *Apply the design process *Use and maintain technological products and systems *Assess the impact of products and systems *Medical technologies *Agricultural and related biotechnologies *Energy and power technologies *Information and communication technologies *Transportation technologies *Manufacturing technologies *Construction technologies The Designed World

11. THE NATURE OF TECHNOLOGY Std 1: The Characteristics and Scope of Technology Std 2: The Core Concepts of Technology Std 3: Relationships Among Technologies and the Connections Between Technology and Other Fields TECHNOLOGY AND SOCIETY Std 4: The Cultural, Social, Economic, and Political Effects of Technology Std 5: The Effects of Technology on the Environment Std 6: The Role of Society in the Development and Use of Technology Std 7: The Influence of Technology on History DESIGN Std 8: The Attributes of Design Std 9: Engineering Design Std 10: The Role of Troubleshooting, Research and Development, Invention and Innovation, and Experimentation in Problem Solving ABILITIES FOR A TECHNOLOGICAL WORLD Std 11: Apply Design Processes Std 12: Use and Maintain Technological Products and Systems Std 13: Assess the Impact of Products and Systems THE DESIGNED WORLD Std 14: Medical Technologies Std 15: Agricultural and Related Biotechnologies Std 16: Energy and Power Technologies Std 17: Information and Communication Technologies Std 18: Transportation Technologies Std 19: Manufacturing Technologies Std 20: Construction Technologies KNOWLEDGE *Nature and Evolution of Technology *Linkages *Technological Concepts and Principles PROCESSES *Designing and Developing Technological Processes and Systems *Determining and Controlling the Behavior of Technological Systems *Utilizing Technological Systems * Assessing the Impacts and Consequences of Technological Systems CONTEXTS *Biological and Chemical Systems *Informational Systems *Physical Systems PROCESSES KNOWLEDGE CONTEXTS From Rationale & Structure (ITEA, 1996) 기술과 교육 평가 최유현 교수 From Standards for Technological Literacy (ITEA, 2000)

12. 제 3 단계 (2003) • Along with STL, AETL describes the attributes of the effective study of technology that lead to technological literacy. • AETL contains three separate but interrelated sets of standards • Student Assessment • Professional Development • Program 기술과 교육 평가 최유현 교수

13. Student Assessment The systematic, multi-step process of collecting evidence on student learning, understanding, and abilities and using that information to inform instruction and provide feedback to the learner, thereby enhancing student learning. 기술과 교육 평가 최유현 교수

14. Purposes of Assessment • Assessment to assist learning. • Assessment of individual achievement. • Assessment to evaluate programs. (NRC, 2000) 기술과 교육 평가 최유현 교수

15. Primary Goal Of Student Assessment Student assessment data should be used to improve the teaching and learning process for all students. (ITEA, 2003) 기술과 교육 평가 최유현 교수

16. Assessment vs. Evaluation • The term “assessment” is used when referring to the collection of data on the knowledge and abilities of individual students for use in improving the teaching and learning process. • The term “evaluation”refers to the collection and processing of information and data to determine how well a design meets the requirements and to provide direction for improvement. 기술과 교육 평가 최유현 교수

17. Student Assessment Standards • The student assessment standards are based on Standards for Technological Literacy. • They are intended to be implemented in conjunction with the professional development and program standards included in Advancing Excellence in Technological Literacy. 기술과 교육 평가 최유현 교수

18. Technology Program Components

19. “Improvements in learning will depend on how well assessment, curriculum, and instruction are aligned and reinforce a common set of learning goals, and on whether instruction shifts in response to the information gained from assessments.” (NRC, 2001, p. 25) 기술과 교육 평가 최유현 교수

20. Notations consist of definitions, tables, quotations, and correlations. • Correlations identify a relationship within or between the standards in AETL and STL.

22. Vignettes provide detailed examples of how standards can be put into practice.

23. Vision of STL and AETL The vision of STL and AETL is that all students can and should become technologically literate. 기술과 교육 평가 최유현 교수

24. Gathering Evidence(ITEA, 2004)증거의 수집 - 평가 방법 • Concept Mapping • Debate • Demonstration / Presentation • Design Brief • Discussion / Interview • Journal / Log • Modeling / Prototyping 기술과 교육 평가 최유현 교수

25. Gathering Evidence(ITEA, 2004) 증거의 수집 - 평가 방법 • Multiple-Choice Test • Observation • Open-Ended Questioning • Portfolio • Project • Self Assessment / Peer Assessment • True-False Tests 기술과 교육 평가 최유현 교수

26. 기술과 평가의 원리(ITEA, 2004) • 공정하고 균형잡힌 학습자 평가 방법을 적용한다. • 타당하고 신뢰로운 측정 도구를 마련한다. • 학습자 학습과 평가에 관한 현재의 연구를 반영한다. • 형성평가와 총괄평가를 통합한다. • 학습자 학습활동을 강화한다. • 학습자의 공통성(commonality)과 다양성(diversity)을 모두 반영한다. • 평가 과정에서 학습자를 참여시킨다. • 현재의 기술적 내용을 반영한다. • 참 평가(authentic assessment)를 활용한다. 기술과 교육 평가 최유현 교수

27. 기술과 교육 평가 최유현 교수

28. 기술과 교육 평가 최유현 교수

29. Gathering Evidence(ITEA, 2004) 증거의 수집 - 평가 방법 • Multiple-Choice Test • Observation • Open-Ended Questioning • Portfolio • Project • Self Assessment / Peer Assessment • True-False Tests 기술과 교육 평가 최유현 교수

30. 수행평가의 장점 Specific criteria 기술과 교육 평가 최유현 교수

31. 수행평가의 제한점 Reliability Time Sampling 기술과 교육 평가 최유현 교수

32. 수행평가의 기본 전략 I 기술과 교육 평가 최유현 교수

33. 기술과 교육 평가 최유현 교수

34. 기술과 교육 평가 최유현 교수

35. 기술과 교육 평가 최유현 교수

36. 수행평가의 기본 전략 II 기술과 교육 평가 최유현 교수

37. 좋은 과제? 기술과 교육 평가 최유현 교수

38. 수행평가의 기본 전략 III 기술과 교육 평가 최유현 교수

39. 학습 전략의 구안 평가 전략의 구안 학습 과제 분석 수행과제의 추출 학습 목표의 구체화 수행 중심 학습 자료 및 평가도구의 개발 수행중심 수업전략의 실행 수업의 반성 학습과 평가를 통합한 수행중심 수업 기본 모형 기술과 교육 평가 최유현 교수

40. 기술과 교육과 포트폴리오 평가Portfolio Assessment • 포트폴리오 평가의 특징과 개념 • 포트폴리오 평가의 절차Portfolio is not folder 기술과 교육 평가 최유현 교수

41. 포트폴리오 평가의 특징 기술과 교육 평가 최유현 교수

42. 포트폴리오 평가의 개념 학생들의 개인적 진척도와 성장과정, 수업 프로그램 등의 평가 목적을실현하기 위하여 학생들이 주어진 기간 동안에 쓰기 자료, 각종 보고서, 작품, 녹음 녹화자료, 그림, 저작물, 평가자료 등의 다양한 내용물을 적절한 물리적 구조에체계적이며, 지속적이고, 의도적으로 문서화하거나 자료화하여 교사와 학생 모두가 성찰적으로 평가하는 전략이다(최유현, 2001). 기술과 교육 평가 최유현 교수

43. 포트폴리오 평가의 절차- 포트폴리오 평가계획 기술과 교육 평가 최유현 교수

44. 포트폴리오 평가 계획의 체크리스트 1. 학습 목표가 명확한가? 2. 포트폴리오의 활용 목적이 명확한가? 3. 자료를 정확히 담을 물리적 구조가 있는가? 그리고 쉽게 수집될 수 있는가? 4. 자료의 내용물을 정확하게 선정할 절차가 있는가? 5. 자료 내용의 특성이 목적과 어울리는가? 6. 학생들의 자기 평가 안내와 질문이 명확한가? 7. 채점 기준이 설정되었는가? 기술과 교육 평가 최유현 교수

45. 포트폴리오 평가의 절차- 포트폴리오 구성 기술과 교육 평가 최유현 교수

46. 포트폴리오 평가의 절차- 평가 실행 기술과 교육 평가 최유현 교수

47. 포트폴리오를 활용하고 실행하기 위한 체크리스트 1. 포트폴리오의 내용과 그것이 어떻게 활용되는지를 알고 있는가? 2. 학생들이 포트폴리오가 왜 중요한지를 알고 있는가? 3. 학생들이 자신의 과제에 책임감을 갖고 있는가, 그리고 자료 선정에 참여하는가? 4. 학생들의 자료가 너무 많지 않으면서 충분한가? 5. 포함해야 할 내용 테이블이 있는가? 6. 구체적인 자기 평가 질문이 마련되어 있는가? 7. 내용 완성을 체크할 체크리스트가 있는가? 8. 개별 항목에 따라 채점 기준이 있는가? 그리고 내용이 명확한가? 9. 개별화된 교사 작성 논평이 마련되어 있는가? 10. 학생-교사 회의가 포함되어 있는가? 기술과 교육 평가 최유현 교수

48. 포트폴리오 평가의 절차- 평가 피드백 기술과 교육 평가 최유현 교수

49. 포트폴리오의 반성적 자기 평가단계의 가능한 질문 ∙ 네가 한 활동을 말할 수 있겠니? ∙ 너의 학습 활동가운데 가장 좋은 것이 무엇이니? ∙ 다음에 무엇을 할 것인가? ∙ 너의 자료에서 배운 것이 무엇인가? ∙ 보다 시간이 더 주어진다면 어떻게 자료를 구성할 것인가? ∙ 선정된 자료에서 가장 큰 장점과 단점은 무엇인가? ∙ 이것을 수행하는데 겪은 문제나 장애가 무엇인가? 그리고 나중에 다시 한다면 어떻게 극복할 것인가? ∙ 이것이 가장 좋은 작품인가? 왜 그런가? 왜 그렇지 않은가? ∙ 다음 학습 활동에서는 무엇을 할 것인가? ∙ 네가 이것을 수행할 때 너에게 중요한 점이 무엇인가? ∙ 선정된 자료를 가장 만족하는가? 왜 그런가? 기술과 교육 평가 최유현 교수

50. 포트폴리오 자료 내용물 평가 단계의 점검 사항 • 내용물의 체크리스트(checklist of contents) • 포트폴리오 구조 평가(portfolio structure evaluation) - 5단계 평정 척도 • 포트폴리오 개별 항목의 평가(evaluations of individual entries) - 채점 기준 및 명세 • 학습 목표에 전체 평가(evaluation of entire contents) 기술과 교육 평가 최유현 교수