Bewertung von Lehrkräften – in jeder Stunde statt in einer Stichprobe
Circuit Stream veranstaltet Sommercamps für immersive Technologien an sechs Universitätsstandorten in den USA und Kanada. Eine Lehrkraft zu bewerten hieß bisher, dass eine koordinierende Person eine Unterrichtsstunde absitzt. In der Praxis wurde deshalb eine Stunde je Lehrkraft geprüft – in der Hoffnung, dass sie repräsentativ war. Wir haben ein System gebaut, das jede Unterrichtsstunde nach dem hauseigenen Bewertungsraster mit vier Kategorien bewertet und in etwa einer halben Stunde einen fertigen Bericht liefert.
Auswertung der laufenden Stunde
Introduction to Computer Science • Prof. Johnson • 24 students
Aufmerksamkeitskarte der Teilnehmenden
Emotionsauswertung(46 dimensions)
Voice-AI-Tonanalyse
Begeistert
Bewertung der Lehrkraft(1-4 scale)
Verteilung der Redezeit
Verlauf der Stunde
Aktive Hinweise
3 Teilnehmende unter der Aufmerksamkeitsschwelle
Plätze 4, 8, 13
Verständnisabfall um 32:15 erkannt
Thema: Rekursion
- Bewertet – zuvor war es eine Stichprobe je Lehrkraft
- Jede StundeBewertet – zuvor war es eine Stichprobe je Lehrkraft
- In den USA und Kanada, drei davon haben im Piloten Stunden hochgeladen
- 6 StandorteIn den USA und Kanada, drei davon haben im Piloten Stunden hochgeladen
- Von KI und maschinellem Lernen bis Medizin, alle nach einem Raster
- 4 ProgrammeVon KI und maschinellem Lernen bis Medizin, alle nach einem Raster
- Weniger Koordinationszeit für die Bewertung von Lehrkräften
- 79%Weniger Koordinationszeit für die Bewertung von Lehrkräften
- Vom Upload bis zum fertigen Bericht
- 27 Min.Vom Upload bis zum fertigen Bericht
Das ist nicht dieselbe Bewertung, nur schneller. Jede Unterrichtsstunde jeder Lehrkraft zu bewerten war vorher überhaupt nicht möglich.
- Eine Bewertung nach dem hauseigenen Raster mit vier Kategorien
- Stärken, Verbesserungsfelder und ein schriftlicher Maßnahmenplan
- Jede Frage der Teilnehmenden, mit Zeitstempel
- Geplanter Lehrplan gegen den tatsächlich gehaltenen Unterricht
- Stimmsignale: Konzentration, Sicherheit, Raumgeräusche
- Ein Sprung von jedem Befund direkt zu diesem Moment
Über die Stunden hinweg benennt das Dashboard, wer nichts aufgezeichnet hat, wer eine ganze Leistungsstufe abgefallen ist, wer zwischen Stunden schwankt und wie jede Lehrkraft, jeder Kurs und jeder Standort im Vergleich dasteht.
79 % weniger Koordinationszeit
Die mittlere Unterrichtsstunde dauert 1 Std. 10 Min., und niemand muss sie absitzen: Der Bericht liegt nach etwa 40 Minuten vor, im Median nach 27, ohne Aufsicht. Fünfzehn Minuten Lesen ersetzen siebzig Minuten Unterricht, und das Coaching findet am nächsten Morgen statt statt drei Wochen später.
2.058 bewertete Aussagen
Jede Stunde an denselben vier Kategorien gemessen. Zwei koordinierende Personen driften voneinander weg; eine einzelne driftet über einen Sechs-Stunden-Tag. Das Bewertungsraster tut weder das eine noch das andere.
4 Programme, 3 Standorte
Die Stunden kamen von drei Standorten gleichzeitig, in vier Programmen, die außer dem Bewertungsraster nichts gemeinsam haben – eines davon ist Medizin, ein anderes Videospiele. Niemand würde sich alle ansehen, also prüft man in der Praxis eine Stunde je Lehrkraft und hofft, dass sie repräsentativ war. Stattdessen wurde jede Stunde ausgewertet.
8 Stunden in 60 Sekunden
Am 3. Juli wurden innerhalb eines Zeitfensters von 60 Sekunden acht Unterrichtsstunden hochgeladen. Ein Mensch braucht dafür einen vollen Arbeitstag plus Überstunden. Beide Berichte kamen heraus.
- Rasterbewertungen, auf einer Skala von 1 bis 4
- 2,058Rasterbewertungen, auf einer Skala von 1 bis 4
- Schriftliche Coaching-Hinweise
- 1,542Schriftliche Coaching-Hinweise
- Markierte Schlüsselmomente
- 684Markierte Schlüsselmomente
- Transkriptzeilen, nach Sprechern getrennt
- 33,428Transkriptzeilen, nach Sprechern getrennt
- Erfasste Fragen von Teilnehmenden
- 827Erfasste Fragen von Teilnehmenden
- Über die Stunden hinweg erkannte Themen
- 666Über die Stunden hinweg erkannte Themen
Das Raster trennt, statt abzunicken
Die Bewertungen streuen, statt sich zu ballen: 43 % aller Urteile lagen unter „Proficient“ – 10,6 % bei „Needs Improvement“, 32,6 % bei „Developing“. Eine Bewertung, die alle gleich einstuft, ist keine Bewertung.
Geplanter Lehrplan gegen tatsächlich gehaltenen Unterricht
Wo ein Stundenplan vorlag – in diesem Piloten bei vier Stunden –, wurden 60 der 64 geplanten Themen behandelt, und der Bericht benennt die vier, die es nicht wurden, samt Zeitstempel.
“Instead of reviewing hours of recordings, I can quickly identify and act on the highest-impact coaching opportunities.”
“Basetone.AI is an important part of my OKRs, ensuring that I have a strong understanding of the platform, establish continuity in how we use it, and ultimately maximize the value we get from the software and partnership.”
FinanzwesenHawkclaw Capital Advisors
Family Office · Schweiz
Ein Analyse-Desk, das das gesamte Portfolio abdeckt
Die Berichtssaison trifft das ganze Portfolio auf einmal. Das Desk liest jeden Call, auch die, für die nie Zeit war.
Sehen, was wir gebaut habenGlobal tätige Investmentbank
Die Fragen, um die eine Gründerin herumsteuert
Eine global tätige Investmentbank, Managementgespräche aus einem laufenden Transaktionsprozess, und alles, was der Raum bemerkt, aber niemand aufgeschrieben hat.
Sehen, was wir gebaut habenVerteidigung, Nachrichtendienste und Strafverfolgung
Befragungen Satz für Satz durchgesehen, auch die, für die nie jemand Zeit hatte
Widersprüche über mehrere Gespräche, Fragen, um die herum geantwortet wurde, Vortrag gegen die eigene Ausgangslage, Akzent- und Dialektmerkmale, und was das Video im selben Moment zeigt.
Sehen, was wir gebaut habenSagen Sie uns, welche Entscheidung Sie verbessern wollen
Ein Gespräch, keine Präsentation. Wir sagen Ihnen, ob wir das für Sie bauen können – und wenn nicht, sagen wir auch das.