|
Страници по тази тема: 1 | 2 | 3 | 4 | (покажи всички)
Тема
|
Как ИИ се представи на матурата
|
|
Автор |
MilaO6 () |
Публикувано | 11.07.25 21:38 |
|
тази година...
Караманев (Г.), автор на сайта "Дигитални истории" тая година за втори път си направи експеримент, в който сравнява резултатите от матурата по български език и литература между трите основни езикови модела - Gemini, ChatGPT и Claude от една страна, а от друга живата сила, която включва - самия него(Караманев) и двама настоящи зрелостници. Задачата на моделите и участниците е точно същата като на реалните изпити, а оценяването е поверено на двама сертифицирани зрелостни проверители, също участвали като “квестори” на изпита.
Ето го и крайният резултат:
Gemini – отличен 5.68
Claude – отличен 5.52
ChatGPT – отличен 5.50
Всички три модела се представят по-добре от около 90 % от зрелостниците на реалния изпит
Караманев – отличен 5.77( малко над всички ИИ модели)
Никой участник – нито човек, нито ИИ – не получава пълна шестица
Учителите- оценители успяват с висока точност да разграничат кои интерпретации са писани от хора и кои – от ИИ (висока точност, но не и напълно)
ChatGPT демонстрира голяма прилика в критериите за оценяване спрямо официалните, използвани от проверителите.
Експериментът поражда редица размисли като:
Най-мощните езикови модели на ИИ днес могат да постигнат резултати, които надминават тези на повечето зрелостници – но все още не идеални, тъй като липсва перфектна шестица.
Учителите могат да идентифицират текстове, създадени от ИИ, което показва, че макар тяхното качество да е високо, липсва специфичен, характерен стил, което ги отличава от човешките.
ChatGPT е впечатляващо близо до официалните критерии за оценка, което поставя въпросът дали и как ИИ може да бъде използван в помощ на образователния процес.
Според Карманев тази година ИИ се справят по-добре от миналата, задобрели са значително за една година. Намекна, че предстоят още по-мащабни експерименти – с повече участници (човешки и ИИ), които да покажат какво се е променило в образованието и технологиите.
Редактирано от MilaO6 на 11.07.25 21:42.
| |
Тема
|
Re: Как ИИ се представи на матурата
[re: MilaO6]
|
|
Автор |
Naki (Company Ястреб) |
Публикувано | 11.07.25 21:53 |
|
.... по-добре от около 90 % от зрелостниците на реалния изпит
--> К'о, к'о речи!? Ко?! НЕ!!
Присъединете се към нашата Дискорд група:
| |
Тема
|
Re: Как ИИ се представи на матурата
[re: MilaO6]
|
|
Автор |
Nuke Dukem (very good) |
Публикувано | 11.07.25 21:55 |
|
Ако не маже със 100% 6 по всичко, значи е гимик. В областта на шахмата ИИ няма човешки аналог, това чат гпт и останалото към днешна дата е само ч*кия. Но има файда де, щом като търся нещо в гъгъла му обръщам внимание...
| |
Тема
|
Re: Как ИИ се представи на матурата
[re: MilaO6]
|
|
Автор |
ad miral (андорския флот) |
Публикувано | 11.07.25 22:45 |
|
Само преди седмица дъщеря ми заяви, че ИИ е гъзолизец.
_
If I turn out to be particularly clear, you`ve probably misunderstood what I`ve said.
| |
|
По средата на статията, някъде по времето когато четях за класирането на хората пред чат-овете, се приготвих да критикувам безсмислието на подобни експерименти. Какъв е смисълът- щях да кажа- да се сравняват бази-данни-които-могат-да-чатят с човека в изпитна среда? Това не ни дава нищо, освен заблудата че тези чат-бази-данни притежават интелект. Самоцелно- разгорещявам се- упражнение на добър белетрист, който търси повод да упражни перото си.
Обаче изводите ме разколебаха. Дори "разколебаха" е слаба дума, харесаха ми, накараха ме да променя мнението си.
Упражнението на г-н Караманев има смисъл, защото ни води към поне два големи извода. Две направления в които да направим изводите си.
1) За мен първият е че в живота ни това ясвление AI ще продължи да ни съпътства и че няма смисъл да го характеризирам или оценявам. Много по-правилно би било да спра и да го приема без да се дразня от всяко вменено негово ново амплоа
и 2) За да успеем да впишем това хармонично в живота си трябва да експериментираме с него.
В това второ направление са и изводите, които прави Караманев. Чудя се, защо не си избрала да цитираш тях в заглавния си постинг. Ще го направя аз. (Част от тях не са свързани с AI, но ги оставям- заслужават си)
-Матурата е направена така, че изключително лесно да покриваме ниските оценки и разликите да са във високите. Сваляйки толкова ниско критериите, вярвам, не помагаме на никого.
-ИИ става все по-добър в решаването на широкия кръг задачи, които включва този изпит. Съчиненията, създадени от него, при по-прецизно задание (промпт) без съмнение биха били отлични. Нямаше да е честно обаче за целите на този експеримент.
-Учителите, включили се в експеримента, оцениха високо ИИ, значително над средните оценки от изпита изобщо.
-Не е ли всичко това повод да помислим и обсъдим дали пък наистина това е изпитът, с който можем да оценим какво един човек е научил за 12-те си години в училище? Дали е готов за живота? Дали е достоен да бъде приет във висше училище и да продължи нататък?
-Дали това са уменията и знанията, които търсим, след като до толкова голяма степен алгоритмите са способни да ги възпроизведат?
ИИ се оказа… умел оценител. Не си ли струва да се учим как да го използваме, за да ни помага да учим? И ученици, и всички останали…
-В лицето на напредналия ИИ вече имаме изключително мощен инструмент, който може да ни е полезен в изключително много посоки. Време е за разговор, размисъл и още неочаквани експерименти как да го използваме по най-добрия начин!
-Над 90% от родителите смятат, че образованието не е адекватно за днешния ден, че трябва да го променим сериозно. Имаме още един сериозен повод да поговорим за това как да се подготвим за утрешния ден и дори за днешния.
| |
Тема
|
Re: Как ИИ се представи на матурата
[re: MilaO6]
|
|
Автор |
Naki (Company Ястреб) |
Публикувано | 11.07.25 22:52 |
|
Моля авторът на темата или модератор да оправят маймуните с Уникод!!
Съвсем малко са в случая.. (2-3 капки катран в каца с мед)
Присъединете се към нашата Дискорд група: Редактирано от Naki на 11.07.25 22:46.
| |
|
| |
Тема
|
Re: Как ИИ се представи на матурата
[re: Naki]
|
|
Автор |
UnicaDonna (скандалджийка )) |
Публикувано | 12.07.25 00:04 |
|
Моля авторът на темата или модератор да оправят маймуните с Уникод!!
Стига бе, Наки, това ли намери да кажеш два пъти в цялата тема?! Еййй, по-досаден си и от мисирка! ПрескочИ и толкоз!! Дори не е пречещо като дългите линкове, които разтягат екрана и правят темите нечетяеми. Станало-станало, никой не се вълнува, само ти ръчкаш ли, ръчкаш!’
Това да е кусурът на клуба!
ЦРУ свали 83 правителства по света от 1947 до 1997. Повечето - демократични
| |
|
Редактирано от ad miral на 12.07.25 11:06.
| |
|
Държиш да съсипеш темата ли? Ми хубу.
ЦРУ свали 83 правителства по света от 1947 до 1997. Повечето - демократични
| |
|
Страници по тази тема: 1 | 2 | 3 | 4 | (покажи всички)
|
|
|