80066 Nepal      SABER Country Report STUDENT ASSESSMENT  2012         Key Policy Areas for Student Assessment Status 1. Classroom Assessment  The National Curriculum Framework for School Education provides guidelines for   classroom assessment. This document is widely available to the public online and through libraries, and is directly available to teachers through in-service teacher training courses. There are a variety of system-level mechanisms to help ensure that teachers develop the necessary expertise in classroom assessment, including in- and pre- service teacher training, and opportunities to participate in conferences and workshops. However, classroom assessment practices are generally not aligned with the national curriculum framework, and are considered weak. It is common to observe errors in the grading of students’ work, teachers tend to provide little useful feedback to students, and parents are poorly informed about students’ grades. 2. Examinations  The Higher Secondary Education Board Examination has been administered since   1992. The examination is formally used for high school graduation and university entrance, as well as informally for monitoring education quality levels, planning education policy reforms, school and educator accountability, and promoting competition among schools. The examination is funded entirely by student fees, which cover all core examination activities, but do not cover research and development. The government also allocates funds that could be used for the examination program, but it does not provide funding specifically for the examination. While the examination office has state-of-the-art facilities, there is an insufficient number of qualified staff to adequately carry out examination activities. 3. National Large‐Scale Assessment (NLSA)  The Ministry of Education is currently conducting the National Assessment of Student   Achievement (NASA) at the eighth grade, which is the country’s first nationally representative, large-scale assessment exercise. The students in the sample are being tested in Nepali, Mathematics, and Social Studies, and the results will be published by August 2012. The NASA unit, which reports to the Education Review Office in the Ministry of Education, has been established as a permanent body responsible for carrying out NASA activities. Funding for NASA has been provided by the Government of Nepal, and covers all core, as well as research and development, activities. The government of Finland is also providing technical support for research and development.  4. International Large‐Scale Assessment (ILSA)  Nepal has not participated in an ILSA, and it does not have plans to do so in the near   future.    NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Introduction   structured  around  two  main  dimensions  of  assessment  systems:  the  types/purposes  of  assessment  activities    and the quality of those activities.   Nepal  has  focused  on  increasing  student  learning    outcomes  by  improving  the  quality  of  education  in  the  Assessment types and purposes country.  An  effective  student  assessment  system  is  an    important  component  to  improving  education  quality  Assessment  systems  tend  to  be  comprised  of  three  and  learning  outcomes  as  it  provides  the  necessary  main  types  of  assessment  activities,  each  of  which  information  to  meet  stakeholders’  decision‐making  serves  a  different  purpose  and  addresses  different  needs.  In  order  to  gain  a  better  understanding  of  the  information  needs.  These  three  main  types  are:  strengths  and  weaknesses  of  its  existing  assessment  classroom  assessment,  examinations,  and  large‐scale,  system,  Nepal  decided  to  benchmark  this  system  using  system level assessments.  standardized  tools  developed  under  The  World  Bank’s    Systems  Approach  for  Better  Education  Results  (SABER)  Classroom  assessment  provides  real‐time  information  program.  SABER  is  an  evidence‐based  program  to  help  to  support  ongoing  teaching  and  learning  in  individual  countries  systematically  examine  and  strengthen  the  classrooms.  Classroom  assessments  use  a  variety  of  performance  of  different  aspects  of  their  education  formats,  including  observation,  questioning,  and  paper‐ systems.  and‐pencil  tests,  to  evaluate  student  learning,  generally    on a daily basis.  What is SABER‐Student Assessment?       Examinations  provide  a  basis  for  selecting  or  certifying  SABER‐Student  Assessment  is  a  component  of  the  students  as  they  move  from  one  level  of  the  education  SABER  program  that  focuses  specifically  on  system  to  the  next  (or  into  the  workforce).  All  eligible  benchmarking student assessment policies and systems.  students  are  tested  on  an  annual  basis  (or  more  often  if  The  goal  of  SABER‐Student  Assessment  is  to  promote  the  system  allows  for  repeat  testing).  Examinations  stronger  assessment  systems  that  contribute  to  cover  the  main  subject  areas  in  the  curriculum  and  improved education quality and learning for all.   usually involve essays and multiple‐choice questions.      National  governments  and  international  agencies  are  Large‐scale,  system‐level  assessments  provide  feedback  increasingly  recognizing  the  key  role  that  assessment  of  on  the  overall  performance  of  the  education  system  at  student  learning  plays  in  an  effective  education  system.  particular  grades  or  age  levels.  These  assessments  The importance of assessment is linked to its role in:   typically  cover a few subjects on a regular basis (such as  (i) providing  information  on  levels  of  student  every  3  to  5  years),  are  often  sample  based,  and  use  learning and achievement in the system;   multiple‐choice  and  short‐answer  formats.  They  may  be  (ii) monitoring  trends  in  education  quality  over  national or international in scope.   time;     (iii) supporting  educators  and  students  with  real‐ Appendix  1  summarizes  the  key  features  of  these  main  time  information  to  improve  teaching  and  types of assessment activities.  learning; and   (iv) holding stakeholders accountable for results.  SABER‐Student Assessment methodology   The  SABER‐Student  Assessment  framework  is  built  on  the  available  evidence  base  for  what  an  effective  assessment  system  looks  like.  The  framework  provides  guidance  on  how  countries  can  build  more  effective  student  assessment  systems.  The  framework  is  SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    2  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Quality drivers of an assessment system    Table 1: Framework for building an effective   assessment system, with indicator areas The  key  considerations  when  evaluating  a  student    assessment  system  are  the  individual  and  combined  quality  of  assessment  activities  in  terms  of  the  adequacy  of  the  information  generated  to  support  decision  making.  There  are  three  main  drivers  of  information  quality  in  an  assessment  system:  enabling  context, system alignment, and assessment quality.      Enabling  context  refers  to  the  broader  context  in  which  the  assessment  activity  takes  place  and  the  extent  to  which that context is conducive to, or supportive of, the  assessment.  It  covers  such  issues  as  the  legislative  or  policy  framework  for  assessment  activities;  institutional    and  organizational  structures  for  designing,  carrying  The  indicators  are  identified  based  on  a  combination  of  out,  or  using  results  from  the  assessment;  the  criteria, including:   availability  of  sufficient  and  stable  sources  of  funding;   professional standards for assessment;   and the presence of trained assessment staff.   empirical research on the characteristics of effective    assessment  systems,  including    analysis    of    the   System  alignment  refers  to  the  extent  to  which  the  characteristics    that    differentiate    between    the  assessment  is  aligned  with  the  rest  of  the  education  assessment  systems  of  low‐  versus  high‐performing  system.  This  includes  the  degree  of  congruence  nations; and   between  assessment  activities  and  system  learning   theory  —  that    is,    general    consensus    among   goals,  standards,  curriculum,  and  pre‐  and  in‐service  experts    that    it    contributes    to  effective  teacher training.  assessment.        Assessment quality refers to the psychometric quality of  Levels of development the  instruments,  processes,  and  procedures  for  the    assessment  activity.  It  covers  such  issues  as  design  and  The    World    Bank    has    developed    a    set    of   implementation  of  assessment  activities,  analysis  and  standardized questionnaires  and  rubrics  for  collecting   interpretation  of  student  responses  to  those  activities,  and   evaluating   data   on   the   three  assessment  types   and  the  appropriateness  of  how  assessment  results  are  and  related  quality  drivers.    reported and used.      The  questionnaires  are  used  to  collect  data  on  the  Crossing  the  quality  drivers  with  the  different  characteristics  of  the  assessment  system  in  a  particular  assessment  types/purposes  provides  the  framework  country.  The  information  from  the  questionnaires  is  and  broad  indicator  areas  shown  in  Table  1.  This  then  applied  to  the  rubrics  in  order  to  judge  the  framework  is  a  starting  point  for  identifying  indicators  development  level  of  the  country’s  assessment  system  that  can  be  used  to  review  assessment  systems  and  in different areas.   plan for their improvement.      The    basic    structure    of    the    rubrics    for    evaluating   data    collected    using    the  standardized  questionnaires   is  summarized  in   Appendix  2.  The  goal  of  the  rubrics  is  to  provide  a  country  with  some  sense  of  the  development level of its assessment activities compared  to best or recommended practice in each area. For   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    3  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  each   indicator,  the   rubric   displays   four   development   through  a  period  of  political  instability  and  transition.  levels—Latent,  Emerging,   Established,   and   Advanced.  Despite modest economic performance over the past 10  These  levels  are  artificially  constructed  categories  years,  Nepal  has  shown  impressive  progress  on  poverty  chosen  to  represent  key  stages  on  the  underlying  reduction and human development outcomes.  continuum  for  each  indicator.    Each  level  is    accompanied  by  a  description  of  what  performance  on  Nepal  has  made  significant  improvements  in  access  to  the indicator looks like at that level.    education.  Primary  school  enrollment  is  close  to  universal,  and  primary  completion  is  at  78  percent.  Net   Latent  is  the  lowest  level  of  performance;  it  enrollment  rate  disparities  in  access  to  primary  represents  absence  of,  or  deviation  from,  the  education  across  regions,  income  levels,  and  ethnic  desired attribute.   groups  have  narrowed.  In  particular,  girls  have   Emerging  is  the  next  level;  it  represents  partial  increasingly  gained  access  to  schooling:  gender  parity  presence of the attribute.   has  been  achieved  in  primary  and  secondary  education.   Established  represents  the  acceptable  minimum  Furthermore,  completion  rates  for  girls  at  the  primary  standard.  level are slightly higher than for boys.    Advanced  represents  the  ideal  or  current  best    practice.    In  order  to  further  its  reform,  the  Government  of    Nepal’s  School  Sector  Reform  Plan  (2009‐2015)  for  A  summary  of  the  development  levels  for  each  Grades  1‐12  focuses  on  the  three  pillars  of  enhancing  assessment type is presented in Appendix 3.   access,  promoting  inclusion,  and  improving  quality.  The    program  supports  the  following  areas:  Basic  Education  In    reality,    assessment    systems    are    likely    to    be    at   (grades  1‐8),  including  Early  Childhood  Education  and  different   levels   of  development  in  different  areas.  For  Literacy  and  lifelong  learning;  Secondary  Education  example,  a  system  may  be  Established  in  the  area    of   (grades  9‐12),  which  includes  technical  education  and  examinations,    but    Emerging    in    the    area    of    large‐ vocational  training;  and  Institutional  Capacity  scale,    system‐level  assessment,  and  vice  versa.  While  Strengthening  for  delivery  and  monitoring  of  education  intuition  suggests  that  it  is  probably  better  to  be   services  and  products.  The  key  policy  reforms  being  further    along    in    as    many    areas    as    possible,    the   supported  include  increased  community  management  evidence   is   unclear   as   to  whether   it   is   necessary   to   of  schools,  public‐private  partnership  for  improved  be    functioning    at    Advanced    levels    in    all    areas.  delivery  of  textbooks,  and  improved  learning  outcomes  Therefore,  one  might  view  the  Established  level  as  a  through  the  establishment  of  a  standardized  student  desirable  minimum  outcome  to  achieve  in  all  areas,  but  assessment system.     only  aspire  beyond  that  in  those  areas  that  most    contribute  to  the  national  vision  or  priorities  for  Detailed  information  was  collected  on  Nepal’s  student  education.  In  line  with  these  considerations,  the  ratings  assessment  system  using  the  SABER‐Student  generated  by  the  rubrics  are  not  meant  to  be  additive  Assessment  questionnaires  and  rubrics  in  2012.  It  is  across  assessment  types  (that  is,  they  are  not  meant  to  important  to  remember  that  these  tools  primarily  focus  be  added  to  create  an  overall  rating  for  an  assessment  on benchmarking a country’s policies and arrangements  system;  they  are  only  meant  to  produce  an  overall  for  assessment  activities  at  the  system  or  macro  level.  rating  for  each  assessment  type).  The  methodology  for  Additional  data  would  need  to  be  collected  to  assigning  development  levels  is  summarized  in  determine  actual,  on‐the‐ground  practices  in  Nepal,  Appendix 4.  particularly  by  teachers  and  students  in  schools.  The    following  sections  discuss  the  findings  by  each  Education in Nepal   assessment  type,  accompanied  by  suggested  policy    options.  The  suggested  policy  options  were  determined  Nepal  is  a  low  income  country  in  South  Asia.  GDP  per  in  collaboration  with  key  local  stakeholders  based  on  capita  (current  US$,  2012)  is  $690,  with  annual  growth  Nepal’s  immediate  interests  and  needs.  Detailed,  of  approximately  5  percent.  Nepal  is  recovering  from  a  completed  rubrics  for  each  assessment  type  in  Nepal  10‐year  armed  conflict  that  ended  in  2006  and  is  going  are provided in Appendix 5.  SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    4  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Classroom Assessment  In Nepal, there are adequate required uses of classroom  assessment  to  support  student  learning.  Such  uses  include  diagnosing  student  learning  issues,  providing  Level of Development feedback  to  students  on  their  learning,  informing  parents  about  their  child’s  learning,  planning  the  next    steps  in  instruction,  grading  students  for  internal  The  2005  National  Curriculum  Framework  for  School  classroom  uses,  and  providing  input  to  an  external  Education  provides  guidelines  for  classroom  examination  program  (e.g.,  school‐based  assessment  assessment.  This  document  is  widely  available  to  the  with moderation and quality audit).  public  online  and  through  libraries,  and  is  available  to    teachers through in‐service teacher training courses.   Suggested policy options:      There  are  a  variety  of  system‐wide  resources  available  1. Review  existing  system‐level  mechanisms  for  for  teachers  to  engage  in  classroom  assessment  helping  teachers  develop  expertise  in  classroom  activities,  including  a  document  that  outlines  what  assessment to ensure that they are aligned with  the  students  are  expected  to  learn  and  to  what  level  of  national  curriculum  framework  and  the  required  performance  in  different  subject  areas  at  different  uses of assessment data.  grade  and  age  levels.  Resources  also  include  workbooks      that  provide  support  for  classroom  assessment,  scoring  2. Clearly  specify  the  required  uses  of  classroom  criteria  for  students’  work,  as  well  as  item  banks  with  assessment  information  and  develop  detailed  examples of questions.   guidelines  for  carrying  out  classroom  assessment    activities that support student learning.  System‐level  mechanisms  are  in  place  to  ensure  that    teachers  develop  the  necessary  expertise  in  classroom  3. Communicate  to  key  stakeholders  about  the  assessment,  including  in‐  and  pre‐service  teacher  mechanisms  in  place  to  monitor  the  quality  of  training, and opportunities to participate in conferences  classroom  assessment  practices,  and  ensure  that  and  workshops.  All  teacher  training  programs  include  a  monitoring  of  classroom  assessment  activities  takes  required  course  on  classroom  assessment.  Teacher  place.    supervision  also  includes  a  component  that  is  focused      on classroom assessment.    In  general,  classroom  assessment  practices  are  not  aligned  with  the  national  curriculum  framework,  and  are  considered  weak.  It  is  common  to  observe  errors  in  the  grading  of  students’  work,  teachers  tend  to  provide  little  useful  feedback  to  students,  and  parents  are  poorly informed about students’ grades.      There  are  various  systematic  mechanisms  in  place  to  monitor  the  quality  of  classroom  assessment  activities.  Classroom  assessment  is  a  required  component  of  a  teacher’s  performance  evaluation  and  of  school  inspection.  In  addition,  there  are  system‐wide  reviews  of  the  quality  of  education,  which  include  a  focus  on  classroom  assessment.  Government  funding  is  available  for  research  on  the  quality  of  classroom  assessment  activities  and  on  how  to  improve  the  quality  of  classroom assessment practices.      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    5  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Examinations  examination  and  general  information  on  how  to  best  prepare for the examination.      Level of Development Teachers  are  involved  in  most  examination‐related  tasks.  Teachers  select  and  create  the  examination  questions  and  scoring  guides,  administer  and  score  the  The  Higher  Secondary  Education  Board  Examination  examination,  and  supervise  the  examination  program  was  authorized  in  1989  and  has  been  procedures.  There  are  up‐to‐date  compulsory  courses  administered  since  1992.  The  examination  is  formally  and  workshops  on  the  examinations  offered  to  used  for  high  school  graduation  and  university  teachers.  entrance, as well as informally for monitoring education    quality  levels,  planning  education  policy  reforms,  Significant  types  of  inappropriate  behavior  diminish  the  ensuring  that  schools  and  educators  accountable,  and  credibility  of  the  examination.  Such  behavior  includes  promoting competition among schools.    the  leakage  of  the  content  of  an  examination  paper    prior  to  the  examination;  impersonation  (when  an  The  Higher  Secondary  Education  Board  Examination  individual  other  than  the  registered  candidate  takes  the  Manual  2010  document  (original  year  of  authorization,  examination);  copying  from  other  candidates;  using  1989),  is  certified  by  the  Higher  Secondary  Education  unauthorized  materials  such  as  prepared  answers  and  Board and authorizes the examination. This document is  notes;  collusion  among  candidates  (via  mobile  phones,  available  to  the  public  and  outlines  governance,  passing  of  paper,  or  equivalent);  intimidation  of  distribution  of  power,  and  responsibilities  among  key  examination  supervisors,  markers,  or  officials;  issuing  entities.  It  also  outlines  procedures  to  investigate  and  forged  certificates  or  altering  results  information;  and  address  security  breaches,  cheating,  or  other  forms  of  the  provision  of  external  assistance  (via  the  supervisor,  inappropriate  behavior,  as  well  as  procedures  for  mobile  phone,  etc.).  While  inappropriate  behavior  special and disadvantaged students.   surrounding  the  examination  process  is  high,  provisions    to  combat  inappropriate  behavior  have  been  put  in  The  examination  is  funded  entirely  by  student  fees,  place.    which  cover  all  core  examination  activities,  but  do  not    cover  research  and  development.  The  government  also  Suggested policy options:  allocates  funds  that  could  be  used  for  the  examination    program,  but  it  does  not  provide  funding  specifically  for  1. Introduce  government  funding  to  be  used  the examination.    specifically  for  carrying  out  activities  related  to  the    examination, including research and development.  While  the  examination  office  has  state‐of‐the‐art    facilities,  there  is  an  insufficient  number  of  qualified  2. Build  the  capacity  of  individuals  responsible  for  staff  to  adequately  carry  out  examination  activities.  developing  the  examination  questions  by  making  Nepal  offers  some  opportunities  to  prepare  for  work  on  available  specific  training  opportunities  in  the  area  the  examination,  including  university  graduate  of test item design.   programs  and  courses  specifically  focused  on    educational measurement and evaluation.    3. Develop  and  make  available  to  all  test    administrators  a  manual  that  clearly  outlines  the  In  general,  the  Higher  Secondary  Education  Board  process  of  test  administration  and  the  roles,  Examination  measures  the  national  school  curriculum  responsibilities,  and  expectations  of  the  test  guidelines  and  standards  (which  are  based  on  administrator.    internationally  recognized  guidelines  and  standards).      Prior  to  the  examination,  students  have  access  to  examples  of  the  types  of  questions  that  will  be  on  the  SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    6  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  National Large‐Scale Assessment (NLSA)  In  order  to  ensure  the  quality  of  the  NASA  instrument,  all  proctors  and  administrators  are  trained  according  to  a  set  protocol,  all  discrepancies  must  be  recorded  on  a  Level of Development standard  sheet,  data  is  double  processed,  and  there  are  external reviewers and observers.      The  Ministry  of  Education  is  currently  conducting  the  Nepal  has  also  put  in  place  various  mechanisms  to  National  Assessment  of  Student  Achievement  (NASA)  at  monitor  the  consequences  of  NASA,  including  providing  the  eighth  grade,  which  is  the  country’s  first  nationally  funding  for  independent  research  on  the  impact  of  representative,  large‐scale  assessment  exercise.  The  NASA,  introducing  a  permanent  oversight  committee,  students  in  the  sample  are  being  tested  in  Nepali,  regularly  convening  focus  groups  or  surveys  of  key  Mathematics,  and  Social  Studies,  and  the  results  will  be  stakeholders,  holding  themed  conferences  that  provide  published by August 2012.   a  forum  to  discuss  research  and  other  data  on  the    consequences  of  NASA,  and  organizing  expert  review  The  NASA  unit,  which  reports  to  the  Education  Review  groups.  Office  in  the  Ministry  of  Education,  has  been    established  as  a  permanent  body  responsible  for  Suggested policy options:  carrying  out  NASA  activities.  In  order  to  prepare  for    work  on  the  NASA,  Nepal  offers  university  graduate  1. Publicly  assure  the  technical  quality  of  NASA  by  programs,  graduate  and  non‐graduate  university  making  available  a  comprehensive,  high‐quality  courses,  and  non‐university  training  courses  specifically  technical report on the assessment.  focused  on  educational  measurement  and  evaluation,    as  well  as  funding  for  attending  international  programs  2. Facilitate  effective  uses  of  NASA  results  by  making  and  workshops  on  educational  measurement  and  available  a  clearly  written  report  that  includes  evaluation.  detailed  information  on  overall  student    achievement  levels  and  related  factors,  as  well  as  Funding  for  NASA  has  been  provided  by  the  common errors or weaknesses in student responses  Government  of  Nepal,  and  covers  all  core,  as  well  as  and how to address them.   research  and  development,  activities.  The  government    of  Finland  is  also  providing  technical  support  for  3. Inform  key  stakeholders  about  NASA  results  in  a  research and development.  timely  manner  by  ensuring  that  results  are  widely    disseminated  within  12  months  after  the  NASA  measures  performance  against  national  assessment  is  administered  through,  for  example,  curriculum  and  is  largely  accepted  by  stakeholders.  briefings,  workshops,  and  various  forms  of  media  Mechanisms  have  been  put  in  place  to  ensure  that  (such as radio, television, and newspapers).   NASA  accurately  measures  what  it  is  supposed  to    measure.  Such  measures  include  regular  independent      review  by  qualified  experts,  regular  internal  review,  and  ad‐hoc  review  of  the  alignment  between  the  NASA  and  the national curriculum.     Nepal  offers  different  options  to  include  all  groups  of  students  in  the  NASA.  Accommodations  or  alternative  assessments  are  provided  for  students  with  disabilities,  and  special  plans  are  made  to  ensure  that  NASA  is  administered  to  students  in  hard‐to‐reach  areas.  Additionally,  NASA  is  offered  in  the  language  of  instruction for almost all student groups.    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    7  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  International  Large‐Scale  Assessment  (ILSA)  Level of Development      Nepal  has  not  participated  in  an  ILSA,  and  it  does  not  have plans to do so in the near future.    Suggested policy options:    1. Create  an  opportunity  for  high‐level  discussion  among  key  stakeholders  on  key  education  policy  questions  or  problems  for  which  ILSA  data could be useful.    2. Determine the need for, and possible next steps  in relation to, participation in an ILSA exercise.      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    8  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Appendix 1: Assessment Types and Their Key Differences Classroom Large-scale assessment Examinations Surveys National International Exit Entrance Purpose To provide To provide To provide To certify To select immediate feedback on feedback on the students as they students for feedback to overall health of comparative move from one further inform the system at performance of level of the educational classroom particular the education education system opportunities instruction grade/age system at to the next (or level(s), and to particular into the monitor trends in grade/age workforce) learning level(s) Frequency Daily For individual For individual Annually and Annually and subjects offered subjects offered more often more often on a regular on a regular where the system where the system basis (such as basis (such as allows for allows for every 3-5 years) every 3-5 years) repeats repeats Who is All students Sample or A sample of All eligible All eligible tested? census of students at a students students students at a particular grade particular grade or age level(s) or age level(s) Format Varies from Usually multiple Usually multiple Usually essay Usually essay observation to choice and short choice and short and multiple and multiple questioning to answer answer choice choice paper-and-pencil tests to student performances Coverage of All subject areas Generally Generally Covers main Covers main curriculum confined to a few confined to one subject areas subject areas subjects or two subjects Additional Yes, as part of Frequently Yes Seldom Seldom information the teaching collected from process students? Scoring Usually informal Varies from Usually involves Varies from Varies from and simple simple to more statistically simple to more simple to more statistically sophisticated statistically statistically sophisticated techniques sophisticated sophisticated techniques techniques techniques SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    9  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Appendix 2: Basic Structure of Rubrics for Evaluating Data Collected on a Student Assessment System Development Level LATENT ESTABLISHED (Absence of, or EMERGING (Acceptable deviation from, (On way to meeting minimum ADVANCED Dimension attribute) minimum standard) standard) (Best practice) Justification EC—ENABLING CONTEXT EC1—Policies EC2—Leadership, public engagement EC3—Funding EC4—Institutional arrangements EC5—Human resources SA—SYSTEM ALIGNMENT SA1—Learning/quality goals SA2—Curriculum SA3—Pre-, in-service teacher training AQ—ASSESSMENT QUALITY AQ1—Ensuring quality (design, administration, analysis) AQ2—Ensuring effective uses                 SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    10  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Appendix 3: Summary of the Development Levels for Each Assessment Type Assessment Type LATENT EMERGING ESTABLISHED ADVANCED    Absence of, or deviation On way to meeting Acceptable minimum Best practice from, the attribute minimum standard standard There is no system-wide There is weak system- There is sufficient There is strong system- institutional capacity to wide institutional system-wide institutional wide institutional support and ensure the capacity to support and capacity to support and capacity to support and quality of classroom ensure the quality of ensure the quality of ensure the quality of assessment practices. classroom assessment classroom assessment classroom assessment practices. practices. practices. CLASSROOM ASSESSMENT  There is no standardized There is a partially There is a stable There is a stable examination in place for stable standardized standardized standardized key decisions. examination in place, examination in place. examination in place and and a need to develop There is institutional institutional capacity and institutional capacity to capacity and some strong mechanisms to run the examination. The limited mechanisms to monitor it. The EXAMINATIONS  examination typically is monitor it. The examination is of high of poor quality and is examination is of quality and is perceived perceived as unfair or acceptable quality and is as fair and free from corrupt. perceived as fair for corruption. most students and free from corruption. There is no NLSA in There is an unstable There is a stable NLSA There is a stable NLSA place. NLSA in place and a in place. There is in place and institutional need to develop institutional capacity and capacity and strong institutional capacity to some limited mechanisms to monitor run the NLSA. mechanisms to monitor it. The NLSA is of high NATIONAL (OR SYSTEM‐ Assessment quality and it. The NLSA is of quality and its LEVEL) LARGE‐SCALE  impact are weak. moderate quality and its information is ASSESSMENT  information is effectively used to disseminated, but not improve education. always used in effective ways. There is no history of Participation in an ILSA There is more or less There is stable participation in an ILSA has been initiated, but stable participation in an participation in an ILSA nor plans to participate there still is need to ILSA. There is and institutional capacity in one. develop institutional institutional capacity to to run the ILSA. The capacity to carry out the carry out the ILSA. The information from the INTERNATIONAL LARGE‐ ILSA. information from the ILSA is effectively used SCALE ASSESSMENT  ILSA is disseminated, to improve education. but not always used in effective ways. SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    11  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012  Appendix 4: Methodology for Assigning score  for  these  key  dimensions.  These  key  variables  Development Levels include  formal  policy,  regular  funding,  having  a    permanent  assessment  unit,  and  the  quality  of  1.  The  country  team  or  consultant  collects  information  assessment practices.   about the assessment system in the country.      2.  Based  on  the  collected  information,  a  level  of  development and score is assigned to each dimension in  the rubrics:     Latent = 1 score point   Emerging = 2 score points   Established = 3 score points   Advanced = 4 score points    3.  The  score  for  each  quality  driver  is  computed  by  aggregating  the  scores  for  each  of  its  constituent  dimensions. For example:    The  quality  driver,  ‘Enabling  Context,’  in  the  case  of  ILSA,  has  3  dimensions  on  which  a  hypothetical  country  receives  the  following  scores:  Dimension  A  =  2  points;  Dimension  B  =  2  points;  Dimension  C  =  3  points.  The  hypothetical  country’s  overall  score  for  this  quality  driver would be: (2+2+3)/3 = 2.33    4.  A  preliminary  level  of  development  is  assigned  to  each quality driver.     5.  The  preliminary  development  level  is  validated  using  expert  judgment  in  cooperation  with  the  country  team  and The World Bank Task Team Leader.       For  scores  that  allow  a  margin  of  discretion  (i.e.,  to  choose  between  two  levels  of  development),  a  final  decision  has  to  be  made  based  on  expert  judgment.  For  example,  the  aforementioned  hypothetical  country  has  an  ‘Enabling  Context’  score  of  2.33,  corresponding  to  a  preliminary  level  of  development  of  ‘Emerging  or  Established.’  Based  on  qualitative  information  not  captured  in  the  rubric,  along  with  expert  judgment,  the  country  team  chooses  ‘Emerging’  as  the  most  appropriate level.    6.  Scores  for  certain  key  dimensions  under  ‘Enabling  Context’  (in  the  case  of  EXAM,  NLSA,  and  ILSA)  and  under  ‘System  Alignment’  (in  the  case  of  CLASS)  were  set  as  ceiling  scores,  i.e.,  the  overall  mean  score  for  the  particular  assessment  type  cannot  be  greater  than  the  SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    12  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    Appendix 5: SABER‐Student Assessment Rubrics Nepal   This  appendix  provides  the  completed  SABER‐Student  Assessment  rubrics  for  each  type  of  assessment  activity  in  Nepal.  In  each  row  of  the  rubric,  the  relevant  selection  is  indicated  by  a  thick  border  and  an  asterisk.  The  selection  may  include  a  superscript  number  that  refers  to  the  justification  or  explanation  for  the  selection  (as  indicated  by  a  thick  border  and  an  asterisk).  The  explanation  or  justification  text  can  be  located  in  the  “Development‐level  rating  justifications”  section at the end of each rubric. If a row includes a superscript, but not a thick border and an asterisk, this means that  insufficient information was available to  determine the relevant selection in the row.  NEPAL Classroom Assessment   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              13  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT AND SYSTEM ALIGNMENT Overall policy and resource framework within which classroom assessment activity takes place in a country or system, and the degree to which classroom  assessment activity is coherent with other components of the education system.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT AND SYSTEM ALIGNMENT 1: Setting clear guidelines for classroom assessment There  is  no  system‐level  document  that  There  is  an  informal  system‐level  There  is  a  formal  system‐level  document  This  option  does  not  apply  to  this  provides  guidelines  for  classroom  document  that  provides  guidelines  for  that  provides  guidelines  for  classroom  dimension.  assessment.   classroom assessment.  assessment. 1  * This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  The  availability  of  the  document  is  The document is widely available. 2 dimension.   dimension.  restricted.   * ENABLING CONTEXT AND SYSTEM ALIGNMENT 2: Aligning classroom assessment with system learning goals There  are  no  system‐wide  resources  for  There  are  scarce  system‐wide  resources  There  are  some  system‐wide  resources  There  are  a  variety  of  system‐wide  teachers for classroom assessment.  for teachers for classroom assessment.   for teachers for classroom assessment.  resources  available  for  teachers  for  classroom assessment. 3  * There  is  no  official  curriculum  or  There  is  an  official  curriculum  or  There  is  an  official  curriculum  or  There  is  an  official  curriculum  or  standards document.  standards  document,  but  it  is  not  clear  standards  document  that  specifies  what  standards  document  that  specifies  what  what  students  are  expected  to  learn  or  students  are  expected  to  learn,  but  the  students  are  expected  to  learn  and  to  to what level of performance.  level  of  performance  required  is  not  what level of performance. 4  clear.  * ENABLING CONTEXT AND SYSTEM ALIGNMENT 3: Having effective human resources to carry out classroom assessment activities There  are  no  system‐level  mechanisms  This  option  does  not  apply  to  this  There  are  some  system‐level  There  are  a  variety  of  system‐level  to  ensure  that  teachers  develop  skills  dimension.  mechanisms  to  ensure  that  teachers  mechanisms  to  ensure  that  teachers  and expertise in classroom assessment.  develop  skills  and  expertise  in  classroom  develop  skills  and  expertise  in  classroom  assessment. 5  assessment.  *                                             SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              14  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      ASSESSMENT QUALITY Quality of classroom assessment design, administration, analysis, and use.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring the quality of classroom assessment Classroom  assessment  practices  suffer  Classroom  assessment  practices  are  Classroom  assessment  practices  are  Classroom  assessment  practices  are  from  widespread  weaknesses  or  there  is  known to be weak. 6  known to be of moderate quality.  known to be generally of high quality.  no  information  available  on  classroom  assessment practices.   There  are  no  mechanisms  to  monitor  the  There are ad hoc mechanisms to monitor  There are limited systematic mechanisms  There  are  varied  and  systematic  quality  of  classroom  assessment  the  quality  of  classroom  assessment  to  monitor  the  quality  of  classroom  mechanisms  in  place  to  monitor  the  practices.   practices.  assessment practices.  quality  of  classroom  assessment  practices. 7  * ASSESSMENT QUALITY 2: Ensuring effective uses of classroom assessment Classroom  assessment  information  is  not  This  option  does  not  apply  to  this  Classroom  assessment  information  is  Classroom  assessment  information  is  required  to  be  disseminated  to  key  dimension.  required  to  be  disseminated  to  some  key  required  to  be  disseminated  to  all  key  stakeholders.  stakeholders. 8  stakeholders. 8  * There  are  no  required  uses  of  classroom  There  are  limited  required  uses  of  There  are  adequate  required  uses  of  There  are  adequate  required  uses  of  assessment to support student learning.  classroom  assessment  to  support  classroom  assessment  to  support  classroom assessment to support student  student learning.  student  learning,  excluding  its  use  as  an  learning,  including  its  use  as  an  input  for  external examination results. 9  input for external examination results.  *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              15  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    Classroom Assessment: Development‐level rating justifications 1. There  is  a  formal,  system  level  document  that  provides  guidelines  for  classroom  assessment.  This  document  is  called  the  "National  Curriculum  Framework  for School Education" (2005).    2. The document is widely available. It is available online, in the public library, and through in‐service teacher training.    3. There  are  a  variety  of  system‐wide  resources  that  are  typically  available  to  teachers.  These  resources  include  a  document  that  outlines  what  students  are  expected  to  learn  in  different  subject  areas  at  different  grade/age  levels,  and  a  document  that  outlines  the  level(s)  of  performance  that  students  are  expected to reach in different subject areas at different grade/age levels. Resources also include textbooks or workbooks that provide support for classroom  assessment,  as  well  as  scoring  criteria  or  rubrics  for  students’  work.  Item  banks  or  pools  with  examples  of  selection/multiple‐choice  or  supply/open‐ended  questions are also made available to teachers.    4. There is an official curriculum or standards document that specifies what students are expected to learn and to what level of performance.    5. The  system‐level  mechanisms  to  ensure  that  teachers  develop  skills  and  expertise  in  classroom  assessment  include  pre‐service  and  in‐service  teacher  training  and  opportunities  for  teachers  to  participate  in  conferences  and  workshops.  All  teacher  training  programs  also  include  a  required  course  on  classroom assessment. School inspection or teacher supervision includes a component that is focused on classroom assessment.    6. Classroom  assessment  activities  are  mainly  about  recalling  information.  It  is  also  common  to  observe  errors  in  the  scoring  or  grading  of  students'  work.  Additionally,  parents  are  poorly  informed  about  students'  grades,  and  teachers  provide  little  useful  feedback  to  students.  Classroom  assessment  is  mainly  used as an administrative or a control tool, rather than a pedagogical resource, and it is not aligned with the pedagogical or curricular framework.    7. Various systematic mechanisms are in place to monitor the quality of classroom assessment activities. These mechanisms include that classroom assessment  is  a  required  component  of  a  teacher’s  performance  evaluation  and  of  school  inspection  or  teacher  supervision.  There  are  also  system‐wide  reviews  of  the  quality  of  education  which  include  a  focus  on  classroom  assessment,  and  government  funding  is  available  for  research  on  the  quality  of  classroom  assessment activities and on how to improve the quality of classroom assessment.     8. Teachers are required to report on individual student's performance to parents and students, but not to the school district or Ministry of Education officials.    9. Required uses of classroom assessment include diagnosing student learning issues, providing feedback to students on their learning, informing parents about  their  child’s  learning,  planning  the  next  steps  in  instruction,  grading  students  for  internal  classroom  uses,  and  providing  input  to  an  external  examination  program (e.g., school‐based assessment with moderation and quality audit).      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              16  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    NEPAL Examinations   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              17  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT Overall framework of policies, leadership, organizational structures, fiscal and human resources in which assessment activity takes place in a country or system  and the extent to which that framework is conducive to, or supportive of, the assessment activity.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 1: Setting clear policies No  standardized  examination  has  taken  The  standardized  examination  has  been  The  examination  is  a  stable program  that  This  option  does  not  apply  to  this  place.  operating on an irregular basis.   has been operating regularly. 1  dimension  * There  is  no  policy  document  that  There  is  an  informal  or  draft  policy  There  is  a  formal  policy  document  that  This  option  does  not  apply  to  this  authorizes the examination.  document  that  authorizes  the  authorizes the examination.2  dimension.  examination.  * This  option  does  not  apply  to  this  The  policy  document  is  not  available  to  The  policy  document  is  available  to  the  This  option  does  not  apply  to  this  dimension.  the public.  public. 3  dimension.  * This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  The  policy  document  addresses  some  The  policy  document  addresses  all  key  dimension.  dimension.  key aspects of the examination. 4  aspects of the examination.   * ENABLING CONTEXT 2: Having strong leadership All  stakeholder  groups  strongly  oppose  Most  stakeholder  groups  oppose  the  Most  stakeholders  groups  support  the  All  stakeholder  groups  support  the  the examination or are indifferent to it.  examination. 5  examination.   examination.   * There  are  no  attempts  to  improve  the  This  option  does  not  apply  to  this  There  are  independent  attempts  to  There  are  coordinated  attempts  to  examination by stakeholder groups. 6  dimension.  improve  the  examination  by  stakeholder  improve  the  examination  by  stakeholder  groups.   groups.   * Efforts  to  improve  the  examination  are  This  option  does  not  apply  to  this  Efforts  to  improve  the  examination  are  This  option  does  not  apply  to  this  not  welcomed  by  the  leadership  in  dimension.  generally  welcomed  by  the  leadership  in  dimension.  charge of the examination  charge of the examination. 7  *                                     (CONTINUED)    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              18  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 3: Having regular funding There  is  no  funding  allocated  for  the  There  is  irregular  funding  allocated  for  There  is  regular  funding  allocated  for  the  This  option  does  not  apply  to  this  examination.  the examination.  examination.8  dimension.  * This  option  does  not  apply  to  this  Funding  covers  some  core  examination  Funding  covers  all  core  examination  This  option  does  not  apply  to  this  dimension.  activities:  design,  administration,  data  activities:  design,  administration,  data  dimension.  processing or reporting.   processing and reporting. 9  * This  option  does  not  apply  to  this  Funding  does  not  cover  research  and  This  option  does  not  apply  to  this  Funding  covers  research  and   10   dimension.  development.   dimension.   development.   * ENABLING CONTEXT 4: Having strong organizational structures The  examination  office  does  not  exist  or  The  examination  office  is  newly  The  examination  office  is  a  stable  This  option  does  not  apply  to  this  is newly established.  established.   organization. 11  dimension.  * The  examination  office  is  not  This  option  does  not  apply  to  this  The  examination  office  is  accountable  to  This  option  does  not  apply  to  this  accountable  to  an  external  board  or  dimension.  an external board or agency. 12  dimension.  agency.  * Examination  results  are  not  recognized  Examination  results  are  recognized  by  Examination  results  are  recognized  by  Examination  results  are  recognized  by  by any certification or selection system.  certification  or  selection  system  in  the  one  certification  or  selection  system  in  two  or  more  certification  or  selection  country.  another country.  system in another country.   * The  examination  office  does  not  have  The  examination  office  has  some  of  the  The  examination  office  has  all  of  the  The  examination  office  has  state  of  the  the  required  facilities  to  carry  out  the  required  facilities  to  carry  out  the  required  facilities  to  carry  out  the  art facilities to carry out the examination.  examination.  examination.  examination.   13                                       (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              19  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 5: Having effective human resources There  is  no  staff  to  carry  out  the  The  examination  office  is  inadequately  The  examination  office  is  adequately  The  examination  office  is  adequately  examination.  staffed  to  effectively  carry  out  the  staffed  to  carry  out  the  examination  staffed  to  carry  out  the  assessment  examination, issues are pervasive. 14  effectively, with minimal issues.   effectively, with no issues.   * The  country  does  not  offer  opportunities  This  option  does  not  apply  to  this  The  country  offers  some  opportunities  The  country  offers  a  wide  range  of  that  prepare  for  work  on  the  dimension.  that  prepare  for  work  on  the  opportunities  that  prepare  for  work  on  examination.  examination. 15  the examination.   *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              20  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SYSTEM ALIGNMENT Degree to which the assessment is coherent with other components of the education system.  LATENT EMERGING ESTABLISHED ADVANCED SYSTEM ALIGNMENT 1: Aligning examinations with learning goals and opportunities to learn It  is  not  clear  what  the  examination  This  option  does  not  apply  to  this  There  is  a  clear  understanding  of  what  This  option  does  not  apply  to  this  measures.  dimension.  the examination measures.16  dimension.  * What  the  examination  measures  is  This  option  does  not  apply  to  this  What  is  measured  by  the  examination  is  This  option  does  not  apply  to  this  questioned by some stakeholder groups.  dimension.  largely accepted by stakeholder groups.  dimension.  * Material  to  prepare  for  the  examination  There is some material to prepare for the  There  is  comprehensive  material  to  There  is  comprehensive  material  to  is  minimal  and  it  is  only  accessible  to  examination  that  is  accessible  to  some  prepare  for  the  examination  that  is  prepare  for  the  examination  that  is  very few students.  students. 17  accessible to most students.  accessible to all students.  * SYSTEM ALIGNMENT 2: Providing teachers with opportunities to learn about the examination There  are  no  courses  or  workshops  on  There  are  no  up‐to‐date  courses  or  There  are  up‐to‐date  voluntary  courses  There are up‐to‐date compulsory courses  examinations available to teachers.  workshops  on  examinations  available  to  or  workshops  on  examinations  available  or  workshops  on  examinations  for  teachers.   to teachers.   teachers.   Teachers  are  excluded  from  all  Teachers  are  involved  in  very  few  Teachers  are  involved  in  some  Teachers  are  involved  in  most  * examination‐related tasks.   examination‐related tasks.  examination‐related tasks.   examination‐related tasks. 18  *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              21  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ASSESSMENT QUALITY Degree to which the assessment meets quality standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring quality There  is  no  technical  report  or  other  There  is  some  documentation  on  the  There  is  a  comprehensive  technical  There  is  a  comprehensive,  high  quality  documentation.  examination,  but  it  is  not  in  a  formal  report but with restricted circulation. 19  technical  report  available  to  the  general  report format.   public.   * There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There are limited systematic mechanisms  There  are  varied  and  systematic  ensure the quality of the examination.  dimension.  in  place  to  ensure  the  quality  of  the  mechanisms  in  place  to  ensure  the  examination.20  quality of the examination.  * ASSESSMENT QUALITY 2: Ensuring fairness Inappropriate  behavior  surrounding  the  Inappropriate  behavior  surrounding  the  Inappropriate  behavior  surrounding  the  Inappropriate  behavior  surrounding  the  examination process is high. 21  examination process is moderate.   examination process is low.   examination process is marginal.   * The  examination  results  lack  credibility  The  examination  results  are  credible  for  The  examination  results  are  credible  for  This  option  does  not  apply  to  this  for all stakeholder groups.  some stakeholder groups.  all stakeholder groups.   dimension.  * The  majority  of  the  students  (over  50%)  A  significant  proportion  of  students  A  small  proportion  of  students  (less  than  All  students  can  take  the  examination;  may not take the examination because of  (10%‐50%) may not take the examination  10%)  may  not  take  the  examination  there  are  no  language,  gender,  or  other  language,  gender,  or  other  equivalent  because  of  language,  gender,  or  other  because  of  language,  gender,  or  other  equivalent barriers.  barriers.  equivalent barriers.  equivalent barriers.  *                                     (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              22  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 3: Using examination information in a fair way Examination  results  are  not  used  in  a  Examination  results  are  used  by  some  Examination  results  are  used  by  most  Examination  results  are  used  by  all  proper way by all stakeholder groups.  stakeholder groups in a proper way.  stakeholder groups in a proper way.   stakeholder groups in a proper way.   * Student names and results are public.   This  option  does  not  apply  to  this  Students’ results are confidential. This  option  does  not  apply  to  this  dimension.  dimension.  * ASSESSMENT QUALITY 4: Ensuring positive consequences of the examination There  are  no  options  for  students  who  There  are  very  limited  options  for  There are some options for students who  There  is  a  variety  of  options  for  students  do  not  perform  well  on  the  examination,  students who do not perform well on the  do not perform well on the examination.   who  do  not  perform  well  on  the  or  students  must  leave  the  education  examination. 22  examination.  system.  * There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There  are  some  mechanisms  in  place  to  There  is a  variety  of  mechanisms  in  place  monitor  the  consequences  of  the  dimension.  monitor  the  consequences  of  the  to  monitor  the  consequences  of  the  examination.   examination. 23  examination.   *           SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              23  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    Examinations: Development‐level rating justifications 1. The  Higher  Secondary  Education  Board  Examination  program  was  authorized  in  1989  and  has  been  operating  since  1992.  It  is  used  formally  for  high  school  graduation  and  university  entrance,  as  well  as  informally  for  monitoring  education  quality  levels,  planning  education  policy  reforms,  ensuring  that  schools  and educators accountable, and promoting competition among schools.    2. The document is the Higher Secondary Education Board Examination Manual 2010, authorized by the Higher Secondary Education Board. The original year of  authorization is 1989.    3. The policy document is available to the public.     4. The  policy  document  outlines  governance,  distribution  of  power,  and  responsibilities  among  key  entities.  It  also  outlines  procedures  to  investigate  and  address  security  breaches,  cheating,  or  other  forms  of  inappropriate  behavior,  as  well  as  procedures  for  special/disadvantaged  students.  The  policy  document  does  not,  however,  describe  the  purpose  of  the  examination  or  the  authorized  uses  of  results.  It  also  does  not  specify  who  can  sit  for  the  examination.  The  policy  document  does  not  explain  how  the  examination  is  aligned  with  curricula  and  standards,  or  the  format  of  the  examination  questions.    5. Based on publicly available evidence, most of the stakeholder groups oppose the examination.    6. There have been no attempts to reform the examination. While stakeholder groups criticize the examination when the results are released, they do not take  steps to reform the examination program.    7. Efforts to improve the examination are generally welcomed by the leadership in charge of the examination. For example, the leadership conducts workshops  to gather suggestions from the different stakeholder groups.    8. Funding  for  the  examination  is  provided  through  student  fees.  The  government  allocates  funds  that  could  be  used  for  the  examination,  but  it  does  not  provide funding directly to the examination.    9. Funding also covers long‐ or medium‐term planning of program milestones, as well as staff training.    10. Funding does not cover research and development.    11. The examination office has been operating since 1989.    12. The examination office is accountable to the Ministry of Education.      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              24  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    13. The  examination  office  has  computers  for  all  technical  staff,  secure  buildings  and  storage  facilities,  and  adequate  communication  tools.  The  examination  office generally has sufficient access to computer servers and the ability to back up data.    14. While the examination office is staffed with permanent or full‐time staff, it is insufficient to meet the needs of the examination.    15. Opportunities include university graduate programs and courses that specifically focus on educational measurement and evaluation.    16. The  examination  measures  the  national  school  curriculum  guidelines  and  standards  (which  are  based  on  internationally  recognized  guidelines  and  standards).    17. Publicly  available  material  on  the  examination  includes  examples  of  the  types  of  questions  that  are  on  the  examination  and  information  on  how  to  prepare  for the examination.    18. Teachers  mainly  select  or  create  examination  questions  and  examination  scoring  guides,  administer  and  score  the  examination,  and  supervise  the  examination procedures.    19. There is a formal technical report but it does not provide sufficient detail about the examination.    20. The  systematic  mechanisms  that  are  in  place  include  internal  and  external  review  or  observers,  as  well  as  translation  verification.  However,  there  is  no  external certification or audit, pilot or field testing.    21. Significant  types  of  inappropriate  behavior  diminish  the  credibility  of  the  examination.  Such  behavior  includes  leakage  of  the  content  of  an  examination  paper  or  part  of  a  paper  prior  to  the  examination;  impersonation  when  an  individual  other  than  the  registered  candidate  takes  the  examination;  copying  from  other  candidates;  using  unauthorized  materials  such  as  prepared  answers  and  notes;  collusion  among  candidates  via  mobile  phones,  passing  of  paper,  or  equivalent;  intimidation  of  examination  supervisors,  markers,  or  officials;  issuing  forged  certificates  or  altering  results  information;  and  the  provision  of  external  assistance  via  the  supervisor,  mobile  phone,  etc.  While  inappropriate  behavior  surrounding  the  examination  process  is  high,  provisions  to  combat  inappropriate behavior have been put in place.    22. Students can retake the examination only if they fail it.    23. Mechanisms  to  monitor  the  consequences  of  the  examination  include  funding  for  independent  research  on  the  impact  of  the  examination,  existence  of  a  permanent oversight committee, and regular focus groups or surveys of key stakeholders.        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              25  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    NEPAL National (or System‐Level) Large‐Scale Assessment (NLSA)   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              26  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT Overall framework of policies, leadership, organizational structures, fiscal and human resources in which NLSA activity takes place in a country or system and the  extent to which that framework is conducive to, or supportive of, the NLSA activity.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 1: Setting clear policies for NLSA No NLSA exercise has taken place.  The  NLSA  has  been  operating  on  an  The  NLSA  is  a  stable  program  that  has  This  option  does  not  apply  to  this  irregular basis. 1  been operating regularly.   dimension.  * There  is  no  policy  document  pertaining  There  is  an  informal  or  draft  policy  There  is  a  formal  policy  document  that  This  option  does  not  apply  to  this  to NLSA.  document that authorizes the NLSA.  authorizes the NLSA.  dimension.  * This  option  does  not  apply  to  this  The  policy  document  is  not  available  to  The  policy  document  is  available  to  the  This  option  does  not  apply  to  this  dimension.  the public.  public.  dimension.  * There is no plan for NLSA activity.  This  option  does  not  apply  to  this There is a general understanding that the  There  is  a  written  NLSA  plan  for  the  dimension.  NLSA will take place.   coming years.   * ENABLING CONTEXT 2: Having strong public engagement for NLSA All  stakeholder  groups  strongly  oppose  Some  stakeholder  groups  oppose  the  Most  stakeholders  groups  support  the  All stakeholder groups support the NLSA.  the NLSA or are indifferent to it. 2  NLSA.  NLSA.                                       (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              27  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012      LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 3: Having regular funding for NLSA There  is  no  funding  allocated  to  the  There  is  irregular  funding  allocated  to  There  is  regular  funding  allocated  to  the  This  option  does  not  apply  to  this  NLSA.  the NLSA.   NLSA. 3  dimension.  * This  option  does  not  apply  to  this  Funding  covers  some  core  NLSA  Funding  covers  all  core  NLSA  activities:  This  option  does  not  apply  to  this  dimension.  activities: design, administration, analysis  design,  administration,  analysis  and  dimension.  and reporting.  reporting.  This  option  does  not  apply  to  this  Funding  does  not  cover  research  and  This  option  does  not  apply  to  this  Funding  *covers  research  and  dimension.  development activities.  dimension.  development activities.   * ENABLING CONTEXT 4: Having strong organizational structures for NLSA There  is  no  NLSA  office,  ad  hoc  unit  or  The  NLSA  office  is  a  temporary  agency  or  The  NLSA  office  is  a  permanent  agency,  This  option  does  not  apply  to  this  team.  group of people.  institution or unit.4  dimension.  * This  option  does  not  apply  to  this  Political  considerations  regularly  hamper  Political  considerations  sometimes  Political  considerations  never  hamper  dimension.  technical considerations.  hamper technical considerations.   technical considerations.   * This  option  does  not  apply  to  this  The  NLSA  office  is  not  accountable  to  a  The  NLSA  office  is  accountable  to  a  This  option  does  not  apply  to  this  dimension.  clearly recognized body.  clearly recognized body. 5  dimension.                                *       (CONTINUED)        SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              28  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 5: Having effective human resources for NLSA There  is  no  staff  allocated  for  running  an  The  NLSA  office  is  inadequately  staffed  The  NLSA  office  is  adequately  staffed  to  The  NLSA  office  is  adequately  staffed  to  NLSA. 6  to effectively carry out the assessment.   carry  out  the  NLSA  effectively,  with  carry  out  the  NLSA  effectively,  with  no  minimal issues.  issues.   The  country  does  not  offer  opportunities  This  option  does  not  apply  to  this  The country offers some opportunities to  The  country  offers  a  wide  range  of  that  prepare  individuals  for  work  on  dimension.  prepare  individuals  for  work  on  the  opportunities  to  prepare  individuals  for  NLSA.  NLSA.   work on the NLSA. 7  *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              29  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SYSTEM ALIGNMENT Degree to which the NLSA is coherent with other components of the education system.  LATENT EMERGING ESTABLISHED ADVANCED SYSTEM ALIGNMENT 1: Aligning the NLSA with learning goals It  is  not  clear  if  the  NLSA  is  based  on  This  option  does  not  apply  to  this  The  NLSA  measures  performance  against  This  option  does  not  apply  to  this  curriculum or learning standards.   dimension.  curriculum or learning standards.   dimension.  * What  the  NLSA  measures  is  generally  This  option  does  not  apply  to  this  What  the  NLSA  measures  is  questioned  What  the  NLSA  measures  is  largely  questioned by stakeholder groups.  dimension.  by some stakeholder groups.   accepted by stakeholder groups. 8  * There  are  no  mechanisms  in  place  to  There  are  ad  hoc  reviews  of  the  NLSA  to  There  are  regular  internal  reviews  of  the  This  option  does  not  apply  to  this  ensure  that  the  NLSA  accurately  ensure  that  it  measures  what  it  is  NLSA  to  ensure  that  it  measures  what  it  dimension.  measures  what  it  is  supposed  to  intended to measure.  is intended to measure. 9  measure.  * SYSTEM ALIGNMENT 2: Providing teachers with opportunities to learn about the NLSA There  are  no  courses  or  workshops  on  There  are  occasional  courses  or  There are some courses or workshops on  There  are  widely  available  high  quality  the NLSA.  workshops on the NLSA. 10  the NLSA offered on a regular basis.  courses  or  workshops  on  the  NLSA  offered on a regular basis.   *         SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              30  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ASSESSMENT QUALITY Degree to which the NLSA meets technical standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring the quality of the NLSA No  options  are  offered  to  include  all  This  option  does  not  apply  to  this  At  least  one  option  is  offered  to  include  Different  options  are  offered  to  include  groups of students in the NLSA.   dimension.  all groups of students in the NLSA.  all groups of students in the NLSA. 11  There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There  are  some  mechanisms  in  place  to  There  are  a  variety  of  mechanisms  in  * ensure the quality of the NLSA.  dimension.  ensure the quality of the NLSA. 12  place to ensure the quality of the NLSA.   * There  is  no  technical  report  or  other  There  is  some  documentation  about  the  There  is  a  comprehensive  technical  There  is  a  comprehensive,  high  quality  documentation about the NLSA. 13  technical  aspects  of  the  NLSA,  but  it  is  report but with restricted circulation.   technical  report  available  to  the  general  not in a formal report format.  public.  ASSESSMENT QUALITY 2: Ensuring effective uses of the NLSA NLSA results are not disseminated. 14  NLSA results are poorly disseminated. NLSA  results  are  disseminated  in  an  This  option  does  not  apply  to  this  effective way.   dimension.  NLSA  information  is  not  used  or  is  used  This  option  does  not  apply  to  this  NLSA  results  are  used  by  some  NLSA  information  is  used  by  all  in  ways  inconsistent  with  the  purposes  dimension.   stakeholder  groups  in  a  way  that  is  stakeholder  groups  in  a  way  that  is  or  the  technical  characteristics  of  the  consistent  with  the  purposes  and  consistent  with  the  purposes  and  assessment. 15  technical  characteristics  of  the  technical  characteristics  of  the  assessment.   assessment.  There  are  no  mechanisms  in  place  to  This  option  does  not  apply  to  this  There  are  some  mechanisms  in  place  to  There  are  a  variety  of  mechanisms  in  monitor the consequences of the NLSA.  dimension.  monitor the consequences of the NLSA.   place  to  monitor  the  consequences  of  the NLSA. 16  *                                             SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              31  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    National (of System‐Level) Large Scale Assessment (NLSA): Development‐level rating justifications 1. The National Assessment of Student Achievement (NASA) Program has been in place for less than five years.    2. Because NASA is being conducted for the first time, it is not yet possible to tell whether stakeholder groups support or oppose it.    3. There is regular funding for NASA that is allocated by the government of Nepal.     4. The NLSA office is called the National Assessment of Student Achievement (NASA) unit, and it reports to the Ministry of Education.    5. NASA is accountable to the Ministry of Education.    6. It is not possible to tell as the entire cycle of NASA has not yet been completed.    7. A  variety  of  opportunities  are  available  in  Nepal  on  an  annual  basis  to  prepare  individuals  for  work  on  the  NLSA.  These  opportunities  include  university  graduate  programs,  graduate  and  non‐graduate  university  courses,  and  non‐university  training  courses  or  workshops  specifically  focused  on  educational  measurement  and  evaluation,  as  well  as  funding  for  attending  international  programs  or  courses,  or  workshops  on  educational  measurement  and  evaluation.    8. Although NASA is in an early stage, what the NASA measures is largely accepted by stakeholders.    9. Mechanisms  have  been  put  in  place  to  ensure  that  NASA  accurately  measures  what  it  is  supposed  to  measure,  including  having  regular  independent  review  by qualified experts, regular internal review, and ad‐hoc review of the alignment between the assessment instrument and what it is supposed to measure.    10. There are occasional courses, workshops, and presentations that are offered to teachers on NASA.    11. Various  options  are  offered  to  include  all  student  groups  in  NASA.  Accommodations  or  alternative  assessments  are  provided  for  students  with  disabilities  and  special  plans  are  made  to  ensure  that  NASA  is  administered  to  students  in  hard‐to‐reach  areas.  Additionally,  NASA  is  offered  in  the  language  of  instruction for almost all student groups.    12. Certain  mechanisms  are  in  place  to  ensure  the  quality  of  the  NASA  instrument.  These  mechanisms  include  that  all  proctors  or  administrators  are  trained  according  to  a  set  protocol,  the  discrepancies  must  be  recorded  on  a  standard  sheet,  data  is  double  processed,  and  there  are  external  reviewers  or  observers.    13. It is not possible to tell as the entire cycle of NASA has not yet been completed.      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              32  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    14. It is not possible to tell as the entire cycle of NASA has not yet been completed.    15. It is not possible to tell as the entire cycle of NASA has not yet been completed.    16. Mechanisms  in  place  to  monitor  the  consequences  of  NASA  include  funding  for  independent  research  on  the  impact  of  NASA,  a  permanent  oversight  committee,  regular  focus  groups  or  surveys  of  key  stakeholders,  themed  conferences  that  provide  a  forum  to  discuss  research  and  other  data  on  the  consequences of NASA, as well as expert review groups.      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              33  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    NEPAL International Large‐Scale Assessment (ILSA)   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              34  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ENABLING CONTEXT Overall framework of policies, leadership, organizational structures, fiscal and human resources in which ILSA takes place in a country or system and the extent to  which that framework is conducive to, or supportive of, ILSA activity.  LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 1: Setting clear policies for ILSA The  country/system  has  not  participated  This  option  does  not  apply  to  this  The  country/system  has  participated  in  The  country/system  has  participated  in  in an ILSA in the last 10 years.1  dimension.  at least one ILSA in the last 10 years.  two or more ILSA in the last 10 years.  * The  country/system  has  not  taken  This  option  does  not  apply  to  this  The  country/system  has  taken  concrete  This  option  does  not  apply  to  this  concrete steps to participate in an ILSA in  dimension.  steps to participate in at least one ILSA in  dimension.  the next 5 years.  the next 5 years.   * There  is  no  policy  document  that  There  is  an  informal  or  draft  policy  There  is  a  formal  policy  document  that  This  option  does  not  apply  to  this  addresses participation in ILSA.   document that addresses participation in  addresses participation in ILSA.   dimension.  ILSA.  This  option  does  not  apply  to  this  The  policy  document  is  not available  to  The  policy  document  is  available  to  the  This  option  does  not  apply  to  this  dimension.   the public.   public.   dimension.  ENABLING CONTEXT 2: Having regular funding for ILSA There  is  no  funding  for  participation  in  There  is  funding  from  loans  or  external  There  is  regular  funding  allocated  at  There is regular funding approved by law,  ILSA.  donors.  discretion.   decree or norm.  This  option  does  not  apply  to  this  Funding  covers  some  core  activities  of  Funding  covers  all  core  activities  of  the  This  option  does  not  apply  to  this  dimension.  the ILSA.  ILSA.   dimension.  Funding  does  not  cover  research  and  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  Funding  covers  research  and  development activities.  dimension.  dimension.  development activities.                                      (CONTINUED)      SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              35  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    LATENT EMERGING ESTABLISHED ADVANCED ENABLING CONTEXT 3: Having effective human resources for ILSA There  is  no  team  or  national/system  There  is  a  team  or  national/system  There  is  a  team  and  national/system  This  option  does  not  apply  to  this  coordinator  to  carry  out  the  ILSA  coordinator  to  carry  out  the  ILSA  coordinator  to  carry  out  the  ILSA  dimension.  activities.  activities.  activities.   This  option  does  not  apply  to  this  The  national/system  coordinator  or  The national/system coordinator is fluent  This  option  does  not  apply  to  this  dimension.  other  designated  team  member  may  not  in the language of the assessment.   dimension.  be  fluent  in  the  language  of  the  assessment.   This  option  does  not  apply  to  this  The  ILSA  office  is  inadequately  staffed  or  The  ILSA  office  is  adequately  staffed  or  The  ILSA  office  is  adequately  staffed  and  dimension.  trained  to  carry  out  the  assessment  trained  to  carry  out  the  ILSA  effectively,  trained  to  carry  out  the  ILSA  effectively,  effectively.   with minimal issues.   with no issues.                                               SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              36  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    SYSTEM ALIGNMENT Degree to which the ILSA meets technical quality standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED SYSTEM ALIGNMENT 1: Providing opportunities to learn about ILSA The  ILSA  team  has  not  attended  The  ILSA  team  attended  some  The  ILSA  team  attended  all  international  This  option does  not  apply  to  this  international workshops or meetings.  international workshops or meetings.  workshops or meetings.   dimension.  The  country/system  offers  no  This  option  does  not  apply  to  this  The  country/system  offers  some  The  country/system  offers  a  wide  range  opportunities to learn about ILSA.  dimension.  opportunities to learn about ILSA.   of opportunities to learn about ILSA.  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  Opportunities  to  learn  about  ILSA  are  Opportunities  to  learn  about  ILSA  are  dimension.  dimension.  available  to  the  country's/system's  ILSA  available  to  a  wide  audience,  in  addition  team members only.   to  the  country's/system's  ILSA  team  members.           SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              37  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    ASSESSMENT QUALITY Degree to which the ILSA meets technical quality standards, is fair, and is used in an effective way.  LATENT EMERGING ESTABLISHED ADVANCED ASSESSMENT QUALITY 1: Ensuring the quality of ILSA Data  from  the  ILSA  has  not  been  The  country/system  met  sufficient  The  country/system  met  all  technical  This  option  does  not  apply  to  this  published.  standards  to  have  its  data  presented  standards  required  to  have  its  data  dimension.  beneath  the  main  display  of  the  presented  in  the  main  displays  of  the  international report or in an annex.  international report.   The  country/system  has  not  contributed  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  The  country/system  has  contributed  new  new knowledge on ILSA.   dimension.  dimension.  knowledge on ILSA.   ASSESSMENT QUALITY 2: Ensuring effective uses of ILSA If  any,  country/system‐specific  results  Country/system‐specific  results  and  Country/system‐specific  results  and  Country/system‐specific  results  and  and  information  are  not  disseminated  in  information  are  disseminated  irregularly  information are regularly disseminated in  information  are  regularly  and  widely  the country/system.  in the country/system.   the country/system.   disseminated in the country/system.   Products  to  provide  feedback  to  schools  This  option  does  not  apply  to  this  Products  to  provide  feedback  to  schools  Products  to  provide  feedback  to  schools  and  educators  about  the  ILSA  results  are  dimension.  and  educators  about  the  ILSA  results  are  and  educators  about  ILSA  results  are  not made available.  sometimes made available.  systematically made available.   There  is  no  media  coverage  of  the  ILSA  There  is  limited  media  coverage  of  the  There  is  some  media  coverage  of  the  There  is  wide  media  coverage  of  the  ILSA  results.  ILSA results.   ILSA results.   results.  If  any,  country/system‐specific  results  Results  from  the  ILSA  are  used  in  a  Results  from  the  ILSA  are  used  in  some  Results  from  the  ILSA  are  used  in  a  and  information  from  the  ILSA  are  not  limited  way  to  inform  decision  making  in  ways  to  inform  decision  making  in  the  variety  of  ways  to  inform  decision  used  to  inform  decision  making  in  the  the country/system.  country/system.   making in the country/system.   country/system.  It  is  not  clear  that  decisions  based  on  This  option  does  not  apply  to  this  This  option  does  not  apply  to  this  Decisions  based  on  the  ILSA  results  have  ILSA  results  have  had  a  positive  impact  dimension.  dimension.  had  a  positive  impact  on  students'  on students' achievement levels.  achievement levels.     SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              38  NEPAL ǀ SABER‐STUDENT ASSESSMENT      SABER COUNTRY REPORT |2012    International Large Scale Assessment (ILSA): Development‐level rating justifications 1. Nepal has not participated in an ILSA, and it does not have plans to do so in the near future.   SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS              39  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012    Acknowledgements  References      This  report  was  prepared  by  The  World  Bank  SABER‐ Clarke,  M.  2012.  “What  Matters  Most  for  Student  Student  Assessment  team  in  collaboration  with  Assessment  Systems:  A  Framework  Paper.”  Venkatesh  Sundararaman,  World  Bank  Senior  READ/SABER  Working  Paper  Series.  Washington,  DC:  Economist and Task Team  Leader for education projects  World Bank.  in  Nepal  until  2012.  It  benefited  from  feedback  and    review  from  Saurav  Bhatta,  World  Bank  Senior  World  Bank.  2012.  Nepal  Country  Indicator  Data.  Economist and Task Team  Leader for education projects  Nepal.  Washington,  DC:  World  Bank.  Data  retrieved  from  http://data.worldbank.org/ on February 27, 2014.    World  Bank.  2013.  Nepal‐  Country  Program  Snapshot  July 2013. Kathmandu, Nepal: World Bank.     World  Bank.  2013.  Nepal:  School  Sector  Reform  Program:  Additional  Financing  Project  Information  Document.  Report  No.  AB7049.  Washington,  DC:  World  Bank.       SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    40  NEPAL ǀ SABER‐STUDENT ASSESSMENT    SABER COUNTRY REPORT |2012      www.worldbank.org/education/saber     The Systems Approach for Better Education Results (SABER) initiative produces comparative data and knowledge on education policies and institutions, with the aim of helping countries systematically strengthen their education systems. SABER evaluates the quality of education policies against evidence-based global standards, using new diagnostic tools and detailed policy data. The SABER country reports give all parties with a stake in educational results—from administrators, teachers, and parents to policymakers and business people—an accessible, objective snapshot showing how well the policies of their country's education system are oriented toward ensuring that all children and youth learn. This report focuses specifically on policies in the area of student assessment. This  work  is  a  product  of  the  staff  of  The  World  Bank  with  external  contributions.   The  findings,  interpretations,  and  conclusions  expressed  in  this  work  do  not  necessarily  reflect  the  views  of  The  World  Bank,  its  Board  of  Executive  Directors,  or  the  governments  they  represent.  The  World Bank does not guarantee the accuracy of the data included in this work. The boundaries, colors, denominations, and other information  shown  on  any  map  in  this  work  do  not  imply  any  judgment  on  the  part  of  The  World  Bank  concerning  the  legal  status  of  any  territory  or  the  endorsement or acceptance of such boundaries.   THE WORLD BANK    SYSTEMS APPROACH FOR BETTER EDUCATION RESULTS    40