марио

Juraj Recký Juraj Гръцки

Тестът за ИТ фитнес стартира за първи път през 2010 г. Целта му е да покаже какви реални умения и компетенции имаме в ИТ. Разговаряхме с инициатора му Марио Леловски за това защо успехът в теста е намалял тази година, колко е важно тестването за работодателите и дали е подходящо като паневропейски изпит.

IT Fitness Test е създаден през 2010 г. Интересът и броят на завършилите теста нараства?

Първото стартиране на теста беше подкрепено от силна комуникационна кампания, която включваше и Адела и Сайф. Това беше началото на смартфоните и бум около цифровите умения. Това беше първият тест за тези умения и затова тестът беше много привлекателен за младите хора и предизвика голям интерес. В него участваха около 80 хиляди души. В един момент интересът беше толкова голям, че около 30 000 души искаха да се явят на теста едновременно, което технически ни притесни, но успяхме. През следващите години броят на завършилите се стабилизира приблизително на 20 000.

Формата и съдържанието са се променили по време на съществуването му?

Да, през първата година форматът за тестване беше по-опростен, обхващаше по-малко теми и имаше по-малко въпроси.

Много е важно колкото се може повече хора да вземат теста?

Това не е абсолютен брой участници, тестът е доброволен и защото не е регистриран като официален инструмент на държавата, правителството или какъвто и да е орган. Това е наша собствена доброволна инициатива.

Тъй като идеята за теста се появи?

Импулсът дойде от проекта за електронни умения, подкрепен от Европейската комисия. Беше през 2010 г. Влизането в проекта беше констатацията, че европейците не са добре подготвени за дигиталната ера и им липсват цифрови умения. По това време САЩ, Обединеното кралство и скандинавците вече напредваха бързо, Европа като цяло. Това беше и истински проблем за младите хора. Днес 80% от хората на работното място използват компютър за нещо. Казахме, че ако искаме да укрепим цифровите умения и компетенции на населението, трябва да започнем с измерването им. Трябваше да знаем колко сме истински.

Само вие като организация сте разработили теста?

Не. Седнахме с екип от учители по компютърни науки, университетски преподаватели и национален клуб по преподаватели по компютърни науки. Дадохме им някаква идея и искахме да знаем какво да правим с нея. Те предложиха да се опитаме да изградим тестване въз основа на степента на знанията, така че тестове за ученици в началното училище да се правят от учители в гимназията. И така, това, което трябва да знае един завършил начално училище, който иска да учи в гимназията, се проверява. Гимназиалният учител знае как трябва да работи с "материала". Тестът за зрелостници от своя страна се основава на изискванията на практиката или университетите. По този начин можем да кажем какво искаме ние, работодателите и университетите, от нашите бъдещи служители и студенти. Ние се различавахме от останалата част на Европа по този подход за справяне с недостига на цифрови умения.

Както казахте, тестът е доброволен. Колко училища са включени?

Основата е стабилна. Приблизително 500 основни и 200 до 300 средни училища. Това са училища, които се включват във всичко. Състезания, халки, олимпиади, проекти, еврофондове. Това е група от училища, които се интересуват от подобряване и разбират необходимостта от такива дейности. Останалите от тези 2000 начални и над 700 средни училища не правят нищо или много малко за тяхното развитие. Това сочи към факта, че само около една трета от училищата действително работят едно върху друго.

Така че можем да разгледаме тези училища по-добре?

Приемаме, че училищата, които участват в голям брой в различни проекти и дейности, имат поне 150 или повече ученици, можем да ги считаме за по-добри и по-активни. Получаваме обратна връзка, че тестът помага на учителите по компютърни науки да идентифицират и да отговорят на това, което учениците не знаят. И тогава те работят с него. Трябва също да се каже, че миналата година проведохме по-голяма комуникационна кампания за теста и привлекохме още 100 училища. В резултат на това общият резултат от средния тест намаля. Училищата, които направиха теста по подразбиране, бяха по-добри, учениците бяха по-добре подготвени. Тези училища го искат, имат добре подготвени ученици и искат да се представят с резултатите си. Новопроверени училища веднага показаха, че са на по-ниско ниво. Тогава въпросът е как има училища, които изобщо не са се явили на теста. Предизвикваме ги и ги каним да тестват, те обикновено дори не реагират, че не се интересуват.

Процентът на успеха на теста през 2019 г. беше 49%, ако участваха останалите училища, резултатът щеше да бъде по-лош?

Смея да твърдя, че резултатът би бил значително по-лош. Напротив, би се оказало, че има около 100 наистина добри училища, 200 доста по-добри, а останалите биха били доста бедни. Тогава е под въпрос какво имат смисъл от всички училища, какво качество на подготовката осигуряват за съвременната дигитална ера, ако не участват в безплатно за тях тестване.

Как изглежда оценката на теста?

Това е много подробен доклад от 100 страници, в който оценяваме всичко, което може да бъде открито с помощта на теста. Можем да предоставим резултати до нивото на отделен ученик. Учителят може да получи резултатите от своя клас, разделени в 5 категории, за всеки отделен ученик. Учителите знаят как да работят с него, да модифицират предмета, да модифицират непрекъснатите тестове.

Вече е имало ситуация, при която учителят ще коригира учебната програма въз основа на резултатите от теста?

Случва се и има много такива случаи. Ние постоянно коригираме въпросите в теста в сътрудничество с учителите. Не за да е по-лек, а за да бъде ефективен.

Попаднали сте на някой, който критикува теста като твърде взискателен?

Тестът като такъв никога преди не е бил атакуван и е вярно, че е практически невъзможно да се направи на 100%. Това е доказателство, че той наистина е добър. Тестът е настроен на 50% среден резултат за дълъг период от време. Тогава чувствителността на теста е добра. Когато всеки има 80% успеваемост, тестът е лесен. Напротив, когато всеки има, с малки изключения, 20-30% тестът беше много труден. Няма значение дали 50% са много или малко, но ако по-голямата част е около 50% или голямата група е около 30%, това ще покаже, че голяма група от младото население е навън. Ако от своя страна има голяма група по-горе, тогава знаете в коя част от въпросите можем да потвърдим.

Наистина не може да се направи на 100%?

Тази година имахме 7 тестера, които го направиха на 100%. Въпросът е, че ако групата със 100% резултат беше голяма, тестът не би бил достатъчно взискателен. Добре изграден тест е този, който е средно 50%.

От която се заплаща тестът?

Това са спонсорски вноски на различни нива. Получихме пари и от Европейската комисия като част от проекта за електронни умения, който беше 10 000 евро годишно. Цялото тестване струва между 30 и 40 хиляди евро. SK nic, администраторът на националния .sk домейн, допринесе за теста за повторение и през последната година Министерството на образованието значително помогна.

Това означава, че цената на тествания субект е колко?

Ако тестваме 20 до 25 хиляди кандидати годишно, цената на един е до 2 евро. Това е изключително малко, като се има предвид, че в теста има много широк набор от въпроси. Ако двадесетте положат теста по едно и също време, те няма да имат същите въпроси. Резултатът е удостоверение за завършил в името. Той съдържа изчерпателна оценка, подробна оценка на резултатите от всяка от петте категории и препоръка за завършилия. Средното време за изпитване е 45 минути до час.

Какви категории са в теста?

Има пет от тях, в рамките на които се опитахме да обхванем целия набор от цифрови умения и компетенции. Категориите са общо използване на интернет, системи за сигурност и компютърни системи, сложни задачи, офис инструменти, инструменти за съвместна работа и социални мрежи.

Коя от категориите смятате за най-важна?

За децата определено е безопасност. Те не знаят как да боравят сигурно с информацията в Интернет и публикуват всичко. Тогава имаме случаи на тормоз, когато злодей изтегли нещо на 2-3 години от интернет, окачи го в класната стая на дигитална дъска за съобщения и целият клас се смее на някого. Тези случаи могат да бъдат толкова екстремни, че детето да се похвали с хубав апартамент, нова картина или някаква електроника и луксозна ваканция с родителите си седмица-две. Тогава за крадеца не е проблем да изчисли, че има хубав апартамент без надзор за няколко седмици, а собственикът е на другия край на света. За съжаление тази категория отдавна е най-слабата.

Не е помогнало интернет гиганти като Facebook, Google или Amazon да скандират един след друг скандал за поверителност и за него все още се говори.?

Толкова много се крещи за това, предупреждавайки, че сигурността не се приема сериозно, когато хората започнат да работят по нея. При тазгодишното тестване резултатите за безопасност бяха малко по-добри от предишните години. Студентите и възрастните вероятно вече са разбрали рисковете, приемат паролите сериозно и не просто се заблуждават от измамни имейли.

Така че коя категория има най-лоши резултати при тазгодишното тестване?

Офис инструменти. Доста тревожно е, защото именно от тази категория всеки, който иска да си намери работа днес, се нуждае от умения и компетенции.

Виждате причината, поради която тази категория е най-слабата?

Това се дължи и на факта, че сме включили по-модерни офис инструменти в категорията, където се очаква взаимното свързване на отделни програми. Във въпросите ние не просто питаме как да добавяме числа в Excel, но искаме да знаем как сте получили графиката, която е в презентацията на Powepoint. Изпитващият трябва да потърси данните, да ги провери, да създаде графика и накрая да разбере дали сме измислили написаното в оригиналната графика. Целият проблем обаче е, че учителите не водят активно учениците да използват и комбинират офис инструменти. Днес младите хора знаят как да търсят, да работят с популярни инструменти, но в момента, в който трябва да комбинират тези основни задачи, възниква проблем.

В контекста на учениците, като инструменти за сътрудничество?

Това са инструменти като Google Drive, решение от Microsoft, iCloud и други подобни. Това са решения, които се използват с участието. За съжаление учениците почти нямат опит с това. Минимум училища могат да направят това, като преподавателите възложат екипна работа на облак и споделени платформи като част от урока по компютърни науки. Днес всяка компания, всеки споделен сервизен център работи по тези решения.

На какво ниво трябва да са моите умения и компетенции, за да премина успешно теста?

Обикновено един от въпросите се задълбочава, например дали можете да направите обобщена таблица в програма за електронни таблици. В противен случай въпросите са изградени така, че опитен потребител да може да се справи с 4 от 5 въпроса. Ако имате 5 верни отговора, вероятно правите повече и усвоявате разширени функции. И обратно, ако имате само 2 отговора правилно, не контролирате достатъчно областта. Ако не успеете половин тест, ще имате истински проблем в работата.

Имате амбицията да направите IT Fitness теста задължителен тест?

Обсъждаме с Националния институт за сертифицирани измервания, че бихме преместили теста в национално сертифицирано тестване, което е нещо като монитор за ученици в гимназията. Предложили сме да работим заедно, за да поддържаме подхода за идентифициране на областите на проблемите, а не на учените и служителите. За мен като работодател дипломата за средно образование по същество е без значение, решаващият фактор е това, което абитуриентът наистина знае. Ако студентът просто научи учебната програма, но не може реално да я използва, той всъщност не знае нищо. За това обаче не може да се говори, тъй като националните институти за сертифицирани измервания обикновено имат различен стил на мислене, също даден от международните стандарти.

Резултатите от теста могат да бъдат сравнени със съседните страни и ако да, как се справяме?

Дигиталните умения са доста широки, от абстрактно мислене, през относително ясни неща, до творчество. И това е проблемът. Понастоящем е невъзможно да се тества креативността. Общувах с художник от академичните среди и той ми каза, че креативността не може да се измери. Той твърдеше, че всеки художник е добър, само за тези, които са по-лоши, се казва, че са неразбрани. Което е подход, който е безполезен за нас. Въпреки това, Пиза, международната система за тестване на уменията на ОИСР, се стреми да обхване всичко в тестването. Следователно от изключително дълго време те само формират концепция какво и как да тестват.

По този начин IT Fitness Test е своеобразно ръководство за това как да го направите?

Има няколко теста, трябва да се намери само начин да се стигне до общоприета процедура. Има DigComp, сега версия 2.1, който изследва 21 различни компетенции, всяка на 8 нива. Ясно е, че е страшно сложно. В същото време те имат компетенции, разделени на 5 области по същия начин като нас. Те обаче работят и с креативност, която ние премахнахме. Тъй като DigComp 2.1 е проект на Европейската комисия, ние основно ги следваме. В момента обаче Европейската комисия тества само дали такова сложно решение изобщо е приложимо. Също така техният тест не се основава на практически тест за знания, но тестваният оценява себе си и по този начин е процес на самооценка. По този начин, когато става въпрос за инструменти за сътрудничество, той пише, че смята, че е на ниво 6. В същото време практиката лесно може да покаже, че е на ниво 2. Само практическа тестова задача наистина ще ви оцени.

Опитахте се да предложите теста в чужбина?

Нашият тест беше използван в Чехия и Финландия. Чехите са в него, също като нас, както в резултат, така и чрез участие. Също така бяха тествани само училища, които редовно се занимават с подобни дейности. Във Финландия в теста участва предварително избрана извадка от училища, което не мисля, че е напълно уместно. В резултат те имаха по-добър резултат от нас. Също така преведохме теста на английски и го предложихме за употреба в Европа. Тук обаче проблемът е, че той трябва да бъде локализиран не само по език, но и в социално-исторически контекст. Има въпроси, които трябва да се разберат в по-широк контекст в страната.

Говорим за теста в контекста на ученици и студенти. По принцип обаче всеки може да го предаде и да получи сертификата?

Тя е отворена за всички. Това е идеална обратна връзка за служители, които не са доволни от работата си. Резултатът може да им подскаже, че наистина имат повече и могат да се сменят, могат да покажат сертификата на интервюто. Напротив, за тези, които са недоволни, но не се подложат на теста, това е сигнал, че те биха могли да влязат в съвестта си. Планираме да модифицираме теста също специално за служители в публичната администрация. По мое мнение, това би могло да причини леко земетресение, в какъв процент от служителите изобщо са необходими уменията и компетенциите, за да изпълняват длъжността си.

Така че това е и истински инструмент за работодателите в частния сектор?

Представете си го така. Вие сте опитен месар, който е започнал собствен бизнес. Занимавате се с производство на месни продукти, в това сте си у дома. Компанията обаче се нуждае и от икономически отдел. В същото време изобщо не познавате икономика, дори нямате много работа. На събеседването при вас ще дойдат 4 кандидати за позицията икономист и те ще напишат в автобиографията си, че са работили в счетоводна програма от четири години. Но това не означава, че те наистина могат да го контролират. И оценете техния опит като напреднал или експерт. Как да се движим при избора?

Не знам…

Ще помогне да има стандарт, в който да е записано, че са необходими такива и такива дигитални умения за такъв и такъв пост. Ако тестът беше стандартизиран, кандидатът ще го вземе, ще получи сертификат и според него може да се ориентира при избора на работа, а работодателят отново може да реши при избора на служители. Разбира се, необходимо е резултатът от теста да бъде разделен на няколко нива и всяко ниво да бъде описано устно. Такова нещо би имало много по-голямо въздействие. Това може да бъде и добра обратна връзка за разработчиците, които може да правят ненужно сложен софтуер за използване.