3-TIMMS_PISA_KBATDr-A-Halim.pdf

download 3-TIMMS_PISA_KBATDr-A-Halim.pdf

of 10

Transcript of 3-TIMMS_PISA_KBATDr-A-Halim.pdf

  • 19-Jul-14

    1

    Pembinaan item model KBAT dAn Model PISA

    20 April 20142.00 petang

    Bilik Seminar, Fakulti Pendidikan, UTM

    Abdul Halim AbdullahFakulti Pendidikan UTM

    The main goal of classroom testing andassessment is to obtain valid, reliable anduseful information concerning studentachievement.

    Assessment

    Pentaksiran adalah proses mendapatkan maklumatdengan menggunakan pelbagai kaedah danpendekatan sama ada formatif, sumatif, formal daninformal, dalaman dan luaran bagi mendapatkanevidens yang boleh dipertimbangkan dan seterusnyamembuat penghakiman tentang sesuatu produkpendidikan.

    Pentaksiran

    8 basic steps in classroom testing & assessment (Linn & Miller, 2005):1. Determining the purpose of measurement2. Developing specification3. Selecting appropriate assessment tasks4. Preparing relevant assessment tasks5. Assembling the assessment6. Administering the assessment7. Appraising the assessment8. Use the result to improve learning & instruction

    Constructing Test Items

    Langkah Pembinaan Item KBATJSU PEMBINAAN ITEM KESAHAN

    Konstruk ialah perkara yang ditaksir atau diukur

    Konstruk

    KONSTRUK

    Pengetahuan-sejauh mana murid faham akansesuatu perkara selepas melaluiproses pembelajaran

    Kemahiran-sejauh manamurid berupayamelakukan sesuatu

    Nilai dan sikap-sejauh manamurid itu bolehmempamerkan danmengamalkan sikapyang positif

  • 19-Jul-14

    2

    Domain kognitif:1. Pengetahuan2. Pemahaman3. Aplikasi 4. Analisis5. Sintesis6. Penilaian

    Taksonomi Bloom

    Domain kognitif:1. Mengingat2. Memahami3. Mengaplikasi 4. Menganalisis5. Menilai6. Mencipta

    Taksonomi Bloom (Revised)

    Taksonomi Bloom

    Pengetahuan

    Pemahaman

    Aplikasi

    Analisis

    Sintesis

    Penilaian

    Mengingat

    Memahami

    Mengaplikasi

    Menganalisis

    Menilai

    Mencipta

    KATA NAMA KATA KERJA

    Mengingat semula maklumat Kata kerja mentakrif, mengenalpasti, menyenaraikan,

    menama, melabel, dll Contoh:1. Senaraikan jenis penjelmaan yang telah anda pelajari?2. Apakah ciri suatu translasi?3. Namakan bahagian-bahagian yang terdapat pada

    bulatan?

    Tahap 1 - Mengingat

    Menerangkan idea atau konsep Kata kerja Mengintepretasikan, meringkaskan,

    merumus, mengkelas, menerangkan, dll Contoh:1. Dalam rajah, W ialah segitiga di bawah penjelmaan K.

    Terangkan penjelmaan K dengan selengkapnya.2. Terangkan hubungan jejari dengan diameter bulatan

    Tahap 2 - Memahami

    Menggunakan maklumat dalam situasi yang baru. Kata kerja - Menunjuk cara, menjalankan,

    menggunakan, mengira, merekod, mengubahsuai,menjana idea, menjelas dengan contoh, dll

    Contoh:1. Dalam graf di ruang jawapan di atas, lukis imej bagi

    segi tiga P di bawah translasi....2. Jejari sebuah bulatan ialah 7cm. Hitung luas sektor

    yang mencangkum sudut 60

    Tahap 3 - Mengaplikasi

  • 19-Jul-14

    3

    Contoh:3. Dengan menggunakan Teorem Pythagoras,

    anggarkan ketinggian sebuah tiang lampu sekiranyajarak pelajar dengan tiang serta sudut dongakandiperolehi.

    Tahap 3 - Mengaplikasi

    Mencerakinkan maklumat kepada komponen-komponen untuk memahami struktur organisasinyadan perhubungan antara komponen

    Kata kerja Membanding beza, mengurus,menyelesaikan masalah, menghuraikan,mencerakinkan, mencirikan, menaakul, dll

    Contoh:1. Apakah benda di sekeliling anda yang

    mengaplikasikan konsep Penjelmaan. Huraikan alasananda?

    2. Apakah alatan di taman permainan yang mempunyailokus lengkuk bulatan?

    Tahap 4 - Menganalisis

    16

    Segi empat sama

    Segi empat tepat Segi tiga Bulatan

    Tahap 4 - Menganalisis Tahap 4 - Menganalisis

  • 19-Jul-14

    4

    Membuat pertimbangan berdasarkan kriteria yangspesifik

    Kata kerja Mengkritik, membuat hipotesis, memberihujah/ pendapat, membuat keputusan

    Contoh:1. Adakah putaran dan pembesaran merupakan satu

    isometri? Jelaskan pendapat anda.

    Tahap 5 - Menilai

    Contoh:2. Sebuah kedai pizza menawarkan dua pizza bulat yang

    mempunyai ketebalan yang sama tetapi saiz yangberbeza. Pizza yang lebih kecil mempunyai diameter30 cm dan berharga RM30. Manakala pizza yang lebihbesar ini mempunyai diameter 40 cm dan berhargaRM40. Pizza manakah yang mempunyai nilai yanglebih baik untuk wang anda? Terangkan hujah anda.

    Tahap 5 - Menilai

    Tahap 5 - Menilai

    A BAntara A dan B, yang manakah lebih baik?Kalau A, mengapa?Kalau B, mengapa?

    Menyatukan elemen untuk membentuk idea ataustruktur yang baru

    Kata kerja Merekacipta, menggabungkan, merangka,membina, dll

    Contoh:1. Dengan menggunakan konsep penjelmaan, bolehkah

    anda terangkan bagaimana untuk menghasilkansebarang corak pada mozaic seperti dalam contohberikut?

    Tahap 6 - Mencipta

    23

    Sintesis bentuk menjadi objek bermakna

    24

    Tahap 6 - Mencipta

  • 19-Jul-14

    5

    Sintesis bentuk menjadi objek bermakna

    Tahap 6 - Mencipta

    Fail GSP

    Taksonomi Bloom

    Taxonomy Verbs for objectives1. Remembering Define, describe, identify, label, list, match,

    name, state2. Understanding Convert, explain, extend, give example, infer

    3. Applying Change, compute, solve, relate, modify4. Analysing Break down, differentiate, discriminate, point

    out5. Evaluating Compare, conclude, criticise, justify,

    summarise6. Creating Design, construct, plan, produce, invent

    Kemahiran Berfikir Aras Tinggi (KBAT)

    Tajuk- tempat pentaksiran sesuatu konstruk itudilaksanakan

    Bahagian-bahagian tertentu mata pelajaran dandikenalpasti daripada Sukatan Pelajaran.

    Biasanya dibahagikan kepada beberapa subkonteks

    PENJELMAAN KONSEP PUTARANKONSEP PANTULAN

    Konteks

    Ditentukan berdasarkan tiga aspek:

    Aras Kesukaran

    Aspek Aras Mudah Aras Sukar

    TahapPengetahuan

    Asas(Basic)

    Lanjutan(Advance)

    Kelaziman Lazim(Familiar)

    Baru(Novel)

    Kerencaman Ringkas(Simple)

    Rencam(Complex)

    Mainly two types of classroom test items: a. Objective test items

    Multiple choice, short answer, fill in the blanks, etc. Highly structured Only 1 correct answer, can be predetermined

    b. Performance assessment Essay questions, open-ended problems, etc. No single right answer Expert is required to score the test

    Tentukan jenis item

  • 19-Jul-14

    6

    In most tests, there is a wide range of tasks that ateacher wants to measure.

    To ensure that a test covers as wide as possible therange of tasks, a simple listing of specific tasks is notenough

    Use Table of Specifications to list the tasks that ateacher wants to measure including the number ofitems for each task so that a test covers arepresentative sample of instruction

    Table of Specifications

    Two functions: Ensures balance and proper emphases across the

    content covered by the teacher Assures inclusion of items that requires the use of

    higher cognitive processes as well as items measuring recall of specific materials

    (MacDaniel, 1994)

    Table of Specifications

    Three steps in building a table of specifications:1. Preparing a list of instructional objectives2. Outlining the course content3. Preparing the two-way chart (table)

    (Linn & Miller, 2005)

    Table of Specifications

    1. Preparing a list of instructional objectives State objectives in terms of what we expect students

    to be able to do at the end of instruction Well-stated objectives tell the type of student

    performance we are willing to accept as evidencethat the instruction has been successful

    Table of Specifications

    1. Preparing a list of instructional objectives Use ABCD A Audience B Behaviour C Condition D Degree

    Table of Specifications

  • 19-Jul-14

    7

    1. Preparing a list of instructional objectives At the end of the lesson, the students are able to

    state all 6 levels of Bloom Taxonomy in the correctorder.

    At the end of the instruction, the students are ableto design a table of specifications for a test coveringone topic following the instructional objectives.

    Table of Specifications

    1. Preparing a list of instructional objectives Criteria to review objectives:a) Completeness are all important outcomes

    included?b) Appropriateness Are outcomes related to school

    goals?c) Soundness Are outcomes in harmony with sound

    principles of learning?d) Feasibility Are outcomes realistic in terms of

    student abilities, time available and facilities?

    Table of Specifications

    2. Outlining the course content What to be included in the test? Which contents will determine which learning

    objectives to be tested. Syllabus

    Table of Specifications

    3. Preparing the table Not all the objectives can be tested using only one

    type of test. Select appropriate objectives to be tested according

    to the type of test we are going to prepare. The table should have the total number of test items

    and the percentage allotted to each objective and content area.

    Table of Specifications

    Kandungan

    Mengingat Memahami Mengaplikasi

    Menganalisis

    Menilai Mencipta

    A. Obj. 1 Obj. 2 Obj. 3

    B. Obj.4 Obj. 5 Obj. 6

    C. Obj.7 Obj. 8

    D. Obj. 9 Obj. 10 Obj.11

    Jadual Spesifikasi UjianKBAT

    Kandungan

    Mengingat Memahami Mengaplikasi

    Menganalisis Menilai Mencipta

    - List all the equations linking s, u, v, a & t

    - Explain the relationships between v, a & t

    - Performalgebra to link 2 equations suitable to solve a problem

    B. Solve problemsin linear motion with constant a

    - Solve problems in linear motion with a constant a

    -Make comparison between v and t;-Determine s, t, u, v & a in a problem

    - Predict the estimateds for 2 moving objects

    Topic: Linear motionTable of Specifications

    KBAT

  • 19-Jul-14

    8

    Contents as in the syllabus

    Remembering

    Understanding Applying Analysing Evaluating Creating

    A. Obj. 1 Obj. 2 Obj. 3

    % No. % No.

    % No. % No.

    B. Obj.4 Obj. 5 Obj. 6

    % No. % No. % No. % No.

    C. Obj.7 Obj. 8

    % No. % No. % No.

    D. Obj. 9 Obj. 10 Obj.11

    % No. % No. % No. % No.

    Table of SpecificationsKBAT

    Jadual Spesifikasi Ujian

    Kandungan Tahap kognitifMengingat Memahami Mengaplikasi Menganalisis Menilai Mencipta

    Relating time, displacement, velocity and acceleration

    List the equations that relate time, displacement, velocity and acceleration. [1]

    Interpret the relationships of time, displacement, velocity and acceleration. [2]

    Choose the correct equation to solve a l inear motion problem. [3,4]

    20 % 4 5 % 1 5 % 1 10 % 2Solve problems of l inear motion with constant acceleration

    Solve problems of l inear motion with constant acceleration. [5,6]

    Compare the velocity and time. [7]

    Identify the s, t, v, u and a of a problem. [8]

    Predict the distance of two moving objects. [9,10]

    30 % 6 10 % 2 10 % 2 10 % 2Interpret l inear motion graphs

    List the information found on linear motion graphs. [12]

    Identify the physics quantity of l inear motion graphs. [11]

    Sketch a l inear motion graph based on the information given. [13]

    Determine the information and facts of l inear motion graphs. [14,15]

    25 % 5 5 % 1 5 % 1 5 % 1 10 % 2Solve problems relating to l inear motion graphs

    Calculate the average velocity of a displacement-time graph. [16]Calculate the

    displacement of a velocity-time graph. [17]

    Make conclusion and interpretation of a l inear motion graph. [18]

    Translate a displacement-time graph to a velocity-time graph. [19]

    Make decision to select the best graph to represent a situation. [20]

    25 % 5 10 % 2 5 % 1 5 % 1 5 % 1

    3. Preparing the table After the table is complete, check that it has a good

    distribution of percentage of items. This should reflect the emphasis of the teachers

    instruction in the classroom. Objectives considered more important and more

    teaching time should be allotted more test items. This also be consistent with the intended and actual

    instructional priority given to the topic.

    Table of Specifications

    3. Preparing the table The table is just a guidance and the final version of

    the test may be different. However, it should not be too far from the original

    desired distribution and should have the correcttotal number of items.

    Table of Specifications

    4. Preparing relevant assessment tasks Construct test items following as close as possible to

    the specification developed Match test items to intended outcomes

    Pembinaan Item KBAT

    Konstruk :

    Konteks :

    Aras kesukaran :

    Pengetahuan sedia : ada

    Pembinaan Item KBAT

    Tentukan jenis item

  • 19-Jul-14

    9

    Tentukan jenis evidens1. Fakta2. Konsep3. Generalisasi4. Keupayaan menilai5. Rasional

    Pembinaan Item KBAT

    Rancang stimulus1. Pelbagai2. Saling berkaitan3. Teks sepenuhnya4. Teks bukan

    sepenuhnya

    Tulis item1. Stimulus2. Stem3. Distraktor

    Pembinaan Item KBAT

    Tulis peraturan pemarkahan/ rubrik penskoran

    Konstruk Menilai

    Konteks Nisbah, kadar dan kadaran

    Aras kesukaran Sederhana

    Pengetahuan sedia ada Konsep penukaran unit

    Pembinaan Item KBAT

    Berdasarkan Penguatkuasaan Barang-BarangKawalan di Bawah Akta AKB 1961, didapatiharga minyak masak adalah seperti berikut:

    Pada pandangan anda, minyak masakmanakah yang mempunyai nilai lebih baikuntuk wang anda? Jelaskan.

    1 kg RM3.30

    2 kg RM6.25

    STEM- Sains, Teknologi, Kejuruteraan, Matematik

    No. Butiran Markah

    1. 3

    2. 2

    3. 1

    Pembinaan Item KBAT

    Peraturan pemarkahan:

    Pembinaan Item KBAT

    Siti ingin menyediakan kotak berbentukkuboid untuk mengisi sebuah periuk nasiyang hendak dihadiahkan kepada ibunya.Berapakah isipadu yang paling sesuai bagikotak tersebut?A. 5 200 cm3B. 10 400 cm3C. 15309 cm3D. 38 880 cm3

    Konstruk : Mengaplikasi

    Konteks : Pepejal Geometri

    Aras kesukaran : Sederhana

    Pengetahuan sedia ada : Isipadu pepejal

  • 19-Jul-14

    10

    Pembinaan Item KBAT

    Insiden MH370 yang terjadi baru-baru ini amat mengejutkan kitasebagai rakyat Malaysia.Rajah berikut menunjukkanbilangan penumpang pesawatMH370 sebagaimana yangdikeluarkan oleh Malaysia AirlineSystem (MAS).

    Tukarkan data tersebut kepadasebuah carta pai.

    Konstruk : Mengaplikasi

    Konteks : Statistik

    Aras kesukaran : Sederhana

    Pengetahuan sedia ada : Peratus

    Pembinaan Item KBATKonstruk : Menganalisis

    Konteks : Bulatan

    Aras kesukaran : Sederhana

    Pengetahuan sedia ada : Bahagian-bahagian bulatan

    Rajah di bawah menunjukkan lokasipencarian pesawat MH370 olehpasukan-pasukan tertentu. Sekiranyaradius sektorpencarian KM AMANAHdan KD PAHANG ialah 2/5 daripadakeseluruhan radius 120 batu nautika,berapakah luas kawasan pencarianoleh KD GANYANG, KM SEBATIK, KMSEGANTANG dan PENGGALANG 17.

    Diketahui, satu batu nautika adalahbersamaan dengan 1,852 meter.