Щоб дізнатися про те, що відбувається у колег, на цей ювілейний 15-й вебінар зареєструвалися 157 організацій з 36 регіонів країни і п'яти іноземних держав (Республіка Вірменія, Білорусь, Казахстан, Таджикистан і Придністровська Молдавська Республіка). Природно, найбільший інтерес тема вивалу у шкіл і вузів, тому їх число виявилося найбільш представницьким серед учасників - 57 освітніх організацій. Всього ж, за словами Ігоря Вальдмана, на цей момент в рамках такого онлайн-спілкування і обміну досвідом РТЦ вдалося зібрати аудиторію обсягом понад п'ять тисяч осіб.

РСОКО по-Новосибірськ

Якщо говорити про цю систему оцінки якості в цілому, то серед основних питань, що постають при її створенні, зустрічаються зазвичай такі:

- які процедури оцінки впроваджені в практику регіону?

- хто їх замовник?

- хто виконавець?

- який інструментарій використовується?

- які рішення приймаються за результатами оцінки?

На ці питання Юлія Захір відповіла настільки послідовно і чітко, що її міркування цілком може взяти за основу будь-який регіон, щоб легко пройти шлях побудови РСОКО.

Так, за словами Юлії Захір, в Новосибірській області регіональна система оцінки якості освіти ділиться на дві частини: це незалежна і відомча експертиза.

Незалежна оцінка якості освіти - поки молодий напрям в регіоні, робота над яким розпочато лише близько п'яти років тому. Так що, тут поки що важко говорити про закріплених процедурах і механізмах, є питання щодо замовників і виконавців. Природно, коли мова заходить про незалежних оцінювачів, в свідомості може виникнути образ активних представників громадянського суспільства, зацікавлених у чесному виявленні всіх перекосів в системі освіти. Правда, поки що важко зрозуміти, в якій саме формі вони можуть виступати замовниками досліджень і з якою метою використовуватимуть їх результати. Вельми суперечлива і ситуація з незалежними організаціями, які хочуть виступати в ролі виконавців досліджень, далеко не кожна з них може запропонувати по-справжньому кваліфіковані послуги.

- Сьогодні дуже багато спекуляцій на цю тему, - підтримав доповідача Віктор Болотов. - Багато фірм хочуть побудувати свій бізнес на оцінюванні, втім, не розуміючи точно, як треба оцінювати. Вони наймають фахівців, вирішуються на демпінг, коли заходить розмова про вартість процедури. У такій ситуації дуже важливо проводити сертифікацію оцінювачів. Адже, щоб зрозуміти, хто здатний якісно провести дослідження, потрібно задати лише три питання: які вимірювальні матеріали ви використовуєте, хто проводить процедуру, як буде проводитися інтерпретація результатів. Для професіонала відповісти на ці питання легко.

Проте, в Новосибірській області вже є два проекти, здійснені в рамках незалежної експертизи. Обидва вони спрямовані на аудит діяльності освітніх установ. Замовником одного з них стала мерія Новосибірська як засновник освітніх установ міста, а виконавцем - регіональна громадська організація «Асоціація незалежних експертів в сфері освіти». У цьому році проведено аудит 5 освітніх установ. У майбутньому році планується продовжити цю роботу. Замовником іншого проекту виступили вже керівники освітніх установ, а оцінювачем став Новосибірський інститут моніторингу і розвитку освіти, який провів аудит діяльності цих установ.

Що стосується другого напрямку РСОКО в Новосибірській області, то це відомча оцінка. Вона розвивається в регіоні ще з середини 90-х років минулого століття, але саме в останнє десятиліття отримала більш активний розвиток в зв'язку з прийняттям низки нормативних актів, які зробили проведення досліджень якості освіти неодмінним елементом функціонування системи. Складається відомча оцінка з чотирьох великих блоків:

1. Державні процедури (в тому числі, ліцензування та акредитація), ДПА, збір федеральної статистики;

2. Моніторинги і проекти федерального і регіонального рівня, рейтинги, бази даних;

3. Процедури оцінки керівників і педагогічних працівників освітніх установ (атестація, кваліфікаційний іспит);

4. Самообследование освітніх установ, оцінка результатів навчання в СПО, оцінка якості предметних досягнень.

Оцінка якості предметних досягнень: 2005 - 2012 рр.

Дана процедура з останнього блоку, на оповіданні про яку Юлія Захір зупинилася особливо докладно, була розроблена в 2005 році і практично в незмінному вигляді діяла до 2012 року. На її прикладі доповідач добре продемонструвала застосування рамки опису процедури оцінки, про яку говорив на минулому вебінарі Віктор Болотов:

1. Цілі. Оцінка відповідності якості підготовки випускників вимогам освітніх програм. За словами Юлії Захір, це формулювання в точності повторює ту, що була в попередньому положенні про акредитацію освітніх установ. Власне, ця оцінка була задумана і проводилася в рамках акредитаційних експертиз. У зв'язку з цим вона ставала для шкіл процедурою «з високими ставками», і було досить непросто уникнути спотворення результатів оцінки.

2. Ключові питання. Ступінь оволодіння предметним змістом, інформація про фактори впливу на результати.

3. Учасники. Випускники 4-х, 9-х та 11-х класів освітніх установ, які проходять в поточному році державну атестацію. В середньому, за словами Юлії Захір, щорічно в поле зору інституту потрапляли 250-350 шкіл. Кожна школа брала участь в оцінці з двох обов'язкових предметів, які вибирав регіон, а також по 1-2 предметів за вибором школи. В цілому, як зазначила доповідач, специфіка освітніх установ, враховувалася при їх оцінці.

- Що стосується оцінки елітних і вечірніх шкіл, то, звичайно, це потрібно робити за різними показниками, - зазначив Віктор Болотов. - Треба робити кластери, тому що безглуздо порівнювати настільки різні освітні організації один з одним. Треба орієнтуватися в такій ситуації на додану вартість, тобто на ті змін, які відбуваються в школі рік від року, вивчати, чи приводять управлінські рішення до поліпшень або погіршень.

4. Що оцінюється? Предметні результати випускників ступенів школи і общепредметних вміння.

5. Інструментарій. Пакет діагностичних матеріалів, що вміщає в себе стандарт, кодифікатор, узагальнений план діагностичної роботи, варіанти діагностичної роботи, бланк відповідей учня, інструкція для експерта з оцінки діагностичної роботи. Природно, що на кожному етапі розробки інструментарію, який створювався протягом цілого року, всі документи проходили експертизу, апробацію та коригування. На сьогоднішній день зібрано 4 регіональні банки тестових завдань для початкової, 17 для основної і 20 для старшої школи, в кожному з яких міститься від 500 до тисячі завдань.

6. Хто проводить (організація)? Новосибірський інститут моніторингу і розвитку освіти. Всі дослідницькі бази, організатори процедури зосереджені тут. Участь у процедурі оцінки приймають муніципальні координатори, а в самих школах, так звані, технологи, яких інститут відбирає з персоналу школи і спеціально готує. Вони виконають наглядову функцію. Велика роль в цьому процесі відведена і самим педагогам. Поки учні виконують завдання, їм пропонується провести оцінку інструментарію, оскільки вони повинні бути зацікавлені в його якості.

7. Представлення результатів. Уже в день проведення оцінки освітні установи отримували матрицю результатів. Якщо у освітньої організації не було претензій за результатами діагностичної роботи, а з боку інституту - по проведенню чесного тестування, результати приймалися. Якщо виникав сумнів у чесності, процедура за рішенням управління ліцензування проводилася повторно. Для педагогів розроблявся збірник з методологічним аналізом. Для Міністерства освіти і науки готувалося експертний висновок по ситуації в кожному навчальному закладі.

8. Види рішень і 9. Хто приймає рішення? Регіон приймає рішення про акредитацію навчального закладу, саме освітня установа визначає напрямки для подальшої методичної роботи.

10. Хто використовує результати? Міністерства освіти та науки, а також директор освітнього закладу для направлення вчителів на курси підвищення кваліфікації, вчитель.

Оцінка якості предметних досягнень діє до: 2013 рік

З плином часу в освіті змінилося багато чого. На зміну стандартам 2004 року прийшли нові ФГОС, які приймалися з 2009 по 2012 роки. Саме тому в останні два роки система оцінки якості предметних досягнень зазнала в Новосибірській області ряд змін. І, по суті, питання рамки опису процедури оцінки здобули на сьогоднішній день нові відповіді. Так, змінилися:

1. Цілі. Тепер важливим є отримання інформації про рівень освітніх досягнень учнів шкіл Новосибірської області.

2. Ключові питання. Рівень предметних досягнень і конкретних загальнонавчальних умінь. Формування системи індикаторів і показників результатів освітньої діяльності навчального закладу.

3.Участнікі. Якщо раніше це були «випадкові» школи, що виходять на державну акредитацію, то тепер у вибірці 50% освітніх установ з кожного муніципалітету. Змінився і досліджуваний контингент учнів. Тепер це 4-е, 6-е, 8-е і 10-е класи. Таким чином, як зазначила Юлія Захір, вибірка стане більш представницьким.

4. Що оцінюється? Предметні результати і конкретні загальнонавчальних вміння, наприклад здатність порівнювати і зіставляти, виділяти необхідну для вирішення певної задачі інформацію і т.д.

5. Інструментарій. Залишився практично незмінним, додалися лише вимоги до робіт.

6. Хто проводить (організація)? Новосибірський інститут моніторингу і розвитку освіти та ін.

7. Преставлення результатів. Міністерства освіти та науки, МОУО дається загальна інформація про якість освіти в регіоні. Для освітніх установ готується матриця результатів, висновки про предметні результати і сформованості навчальних умінь. Педагогічна спільнота може ознайомитися з необхідною професійною інформацією на сайті інституту. Також розроблені спеціальні підходи для подачі матеріалів в ЗМІ.

8. Види рішень і 9. Хто приймає рішення? На регіональному рівні з урахуванням змін в процедурі оцінки поки не накопичена база даних, відповідно, поки не приймаються жодні рішення. Муніципалітети займаються адресною підтримкою освітніх установ. Самі освітні установи і педагоги визначають напрямків методичної роботи, розробляють індивідуальні плани підтримки учнів. Головне, як зазначила Юлі Захір, що за результатами оцінки виявляються не жорсткі заходи впливу, а грамотна адресна допомога.

- Головний ворог будь РСОКО - це адміністративні заходи, які можуть прийматися за результатами оцінки, - підкреслив Віктор Болотов. - Ми працюємо, щоб допомогти муніципалітету, школі, учневі, а не щоб послужити для їх кваліфікації або дискваліфікації. Рейтинг - не привід для дискваліфікації керівника РОНО, директора ін. Це привід для розмови про те, що треба зробити, щоб стало краще.

9.Кто використовує результати? Аудиторія практично та ж, тільки тепер ще й батьки стають активними користувачами результатів дослідження. Головне знайти спосіб представити його в легкотравної формі.

- Не можна просто віддати рейтинг в простір, - зазначила Юлія Захір. - Треба перш розповісти про нього, про те, куди підуть його результати, до яких наслідків це призведе, тому що від цього залежить доля сотень дітей в кожній школі, тисяч батьків, педагогів, директорів.

Ризики і перспективи

Незважаючи на те, що з плином часу процедури змінюються, ризики для РСОКО залишаються практично незмінними. Всі також можна, за словами Юлії Захір, знайти слабкі місця в інструментарії дослідження, пред'явити претензії до його якості. Непростим питанням залишаються кадри. Новосибірський інститут моніторингу і розвитку освіти вирішує цю задачу, навчаючи розробників інструментарію (сьогодні їх число досягло вже 30), залучаючи зовнішніх експертів. Працюють в інституті і над питаннями громадського спостереження в ході таких досліджень. Зазвичай спостерігачі присутні в школі від початку і до кінця процедури, забезпечуючи її чесність. Притягається контингент досить широкий. У селах в цій роботі беруть участь навіть представники сходу громадян.

Якщо говорити про інші проблеми, то це, наприклад, труднощі в отриманні об'єктивних результатів. Незважаючи на те, що з 2013 року інститут намагається зорієнтувати дослідження на потреби самих шкіл, вони всі ще сприймають їх як раніше, коли від результатів залежали питання акредитації.

У загальному і цілому подібна система оцінки існує в Новосибірській області вже 8 років. За такий термін можна не отримати суттєві уроки. Як зазначає Юлія Захір, при побудові РСОКО потрібно пам'ятати, що:

- процедура оцінки не може бути придумана, не може бути створена тільки тому, що «так треба». Вона завжди розробляється під конкретного замовника, з розумінням можливих результатів і наслідків.

- необхідний пошук інформаційних партнерів, щоб результати дослідження «працювали».

- оцінка - розвивається процедура, для вдосконалення якої важлива спадкоємність в інструментарії, організації її проведення і т.д.

І хоча експерти визнають РСОКО Новосибірської області грамотної і кваліфікованої, розробники готові зробити її ще більш досконалою. Зокрема, в числі найближчих завдань регіону в цьому напрямку доопрацювання нормативного забезпечення системи, вдосконалення кадрового складу дослідників, самого інструменту оцінки, розвиток партнерства з організаціями та ЗМІ, які допомагають в розробці варіантів подачі результатів досліджень для різних видів аудиторії. Також в регіоні націлені на розвиток методів незалежної оцінки.

Природно, що розповідь про подібний успішний досвід створення регіональної системи оцінки якості освіти не міг не зацікавити слухачів вебінару. Вони задали велику кількість питань. Багато з них передбачали те, про що Юлія Захір говорила в ході свого повідомлення.

Після закінчення вебінару Ігор Вальдман зазначив, що Новосибірської області вдалося продемонструвати, як регіон в випереджаючому темпі вирішує федеральні задачі. Він зазначив, що основним стимулом для Новосибірська, швидше за все, стала особиста потреба в оціночному інструменті, без якого сьогодні не обійтися і подякував Юлії Захір не тільки за якісну роботу, а й за бажання поділитися тонкощами цієї роботи з колегами по всій країні.

У найближчих планах РТЦ багато цікавого. Так, вже 25 листопада відбудеться черговий вебінар на тему «Що таке індивідуальний прогрес школяра і як його можна міряти». Втім, робота центру будується не тільки на онлайн-спілкуванні. 28-29 листопада тут вживу зустрінуться ті, кого цікавить питання оцінки інформаційно-комунікаційної компетентності випускників основної школи.

Матеріали минулого вебінару на тему «Побудова системи оцінки якості освіти: регіональний аспект» доступні за адресою: http://www.rtc-edu.ru/trainings/webinar/284 .

фото автора