Eğitim Analitiğinde Erken Uyarı Sistemi: Kimler Takılacak, Nerede Takılacak ve Ne Zaman Müdahale Etmeliyim?

Eğitim Analitiğinde Erken Uyarı Sistemi: Kimler Takılacak, Nerede Takılacak ve Ne Zaman Müdahale Etmeliyim?

Bir eğitimde “tamamlamadı” bilgisini son gün aldığınızda, aslında çoktan geç kalmış olursunuz: artık öğrenme değil, sadece kapanış işlemi yönetirsiniz. Bu yüzden analitiği geriye dönük rapordan çıkarıp erken uyarı + müdahale mekanizmasına çevirmek zorundayız.

Kurumsal eğitimde en sık gördüğüm yanlış, “tamamlama oranı”nı bir sağlık göstergesi sanmak. Tamamlama oranı sonuçtur; sonuçlar ise genelde geç konuşur. Benim ilgilendiğim şey, sonuçtan önce gelen küçük işaretler: nerede yavaşladı, hangi adımda kayboldu, hangi grupta gecikme başladı, hangi eğitim “sağlıksız” görünüyor.

“The map is not the territory.” [Alfred Korzybski, Science and Sanity, 1933]
Rapor, öğrenmenin kendisi değil; sadece haritası. Harita iyi çizilirse, kaybolmadan önce “burada sapıyorsun” diyebilir.

Bu yazıda, bir L&D ekibinin elindeki sinyallerle (ilerleme, skor, gecikme, tekrar denemeler, yolculuk adımı gibi) nasıl basit ama işe yarar bir erken uyarı sistemi kurabileceğini anlatacağım. Sonra da o uyarının “alarm” olarak kalmayıp müdahale playbook’una dönüşmesini.

1) Geriye dönük metriklerden öngörücü sinyallere geçmek

Geriye dönük metrikler (lagging indicators) şunlar gibi davranır:

Bunlar kıymetli; ama geç. Erken uyarı için leading indicator’lar gerekir. Yani sonuçtan önce kıpırdayan, “bir şeyler ters gidiyor” diyen işaretler.

Ben leading indicator’ları dört sınıfa ayırıyorum:

  1. Tempo sinyalleri

    • Başladı mı? Ne kadar sürede başladı?
    • Yolculuk adımlarında ilerleme hızı düştü mü?
    • Son tarihe göre gecikme birikiyor mu?

  2. Yeterlilik sinyalleri

    • Skor düşük mü?
    • Deneme sayısı artıyor mu? (aynı yerde dönüp durma)
    • Önkoşul mantığında bir adımda takılı kaldı mı?

  3. Sürtünme sinyalleri (friction)

    • Belirli bir modülde yığılma var mı?
    • Aynı adımda çok kişi “devam ediyor”da mı kalıyor?
    • Bazı gruplarda (şube/bölge/departman) sistematik düşüş var mı?

  4. Bağlam sinyalleri

    • Aynı eğitim farklı segmentlerde farklı mı çalışıyor?
    • Zamanlama yanlış mı? (ör. yoğun dönem, vardiya, saha)
    • Erişim/cihaz kısıtları belirli bir grubu vuruyor mu?

Bu noktada küçük bir düzeltme yapayım: “motivasyon sinyali” demek istiyorum ama motivasyon doğrudan ölçülmüyor. Onun yerine motivasyonun izini ölçüyoruz: gecikme, yarım bırakma, düşük tempo, tekrar deneme gibi.

2) “Takılma” (friction) nerede olur? 5 tip tıkanma noktası

Bir eğitim akışı bozulduğunda, sebep genelde “insanlar tembel” değildir. Bu açıklama çok rahatlatıcıdır; çünkü kimseye sistem borcu bırakmaz. Ama çoğu zaman yanlış.

Ben takılmayı beş başlıkta topluyorum:

2.1 İçerik kaynaklı takılma

Sinyal: Belirli bir modülde kitlesel yığılma; skor düşüşü; aynı adımda uzun süre “devam ediyor”.

2.2 Zamanlama kaynaklı takılma

Sinyal: Başlama gecikmesi; son haftaya yığılma; belirli dönemlerde (ay sonu, kampanya haftası) düşüş.

2.3 Zorluk / seviye uyumsuzluğu

Sinyal: Düşük skor + çok deneme; bir sonraki adımın açılmaması; yolculuk içinde tek adımda sıkışma.

2.4 Motivasyon / anlam eksikliği

Sinyal: Başlamama; yarım bırakma; hatırlatmaya rağmen hareket olmaması.

2.5 Erişim / ortam kaynaklı takılma

Sinyal: Bazı lokasyonlarda sistematik düşük ilerleme; aynı eğitimde bölge farkı.

Bu sınıflama bana şunu sağlıyor: Uyarı geldiğinde “hemen hatırlatma atalım” refleksini kırıyor. Çünkü bazen hatırlatma, erişim sorunu olan kişiye sadece ikinci bir engel ekler.

3) Basit bir risk skoru: segment + eşik + yanlış alarm yönetimi

Erken uyarı sistemi kurmanın en tehlikeli kısmı, her şeyi “kırmızıya” boyamak. İnsan beyni alarmı sevmez; bir süre sonra görmezden gelir. Ben de görmezden gelinmek istemem.

Bu yüzden risk skorunu basit kurarım. Karmaşık model değil; anlaşılır bir mekanik.

Aşağıdaki tablo, örnek bir skor mantığıdır (kuruma göre değişir):

Sinyal Koşul Puan
Başlama gecikmesi Atamadan sonra X gün başlamadı +2
Son tarihe yakınlık Son tarihe ≤ Y gün kaldı ve ilerleme düşük +3
Düşük skor Skor < %60 +3
Çok deneme Deneme sayısı ≥ 3 +2
Yolculuk tıkanması Aynı adımda Z günden uzun +2

Sonra bu puanları bir risk seviyesine çeviririm:

Segment neden şart?

Çünkü aynı sinyal her grupta aynı anlama gelmez. İSG eğitiminde “son tarihe 3 gün kaldı” kırmızı olabilir; bir gelişim içeriğinde sarı bile olmayabilir. KVKK gibi uyum eğitimlerinde tolerans daha düşüktür.

Segment örnekleri:

Yanlış alarmı nasıl yönetirim?

İki yöntem:

  1. Eşiklerle oynamak yerine, alarm türünü değiştirmek.
    “Kırmızı alarm” yerine “izleme listesi” üretmek bazen daha doğru.

  2. Alarmı kişi bazından kurs bazına taşımak.
    Bazen sorun kişi değil, kursun kendisidir. “Kurs Sağlık Haritası” gibi bir görünüm, hangi eğitimlerin sorunlu olduğunu daha erken yakalatır. (Bir kursun sağlığı bozulduysa, tek tek kişileri dürtmek yerine kursu düzeltmek daha hızlıdır.)

Burada insanlarla ilgili hâlâ çözemediğim bir çelişki var: Aynı yönetici, bir gün “bireysel takip yapalım” derken ertesi gün “bana sadece özet verin” diyebiliyor. Aynı kişi, aynı çeyrek. Ben bunu hâlâ tam modelleyemedim; belki de “kontrol isteği” ile “zaman kıtlığı” aynı anda yükseliyor.

4) Müdahale playbook’u: uyarı geldiğinde ne yapacağım?

Erken uyarı, tek başına bir şey değildir. Uyarı, karar doğurmalı. Ben bu yüzden her risk türü için küçük bir playbook tutarım.

Aşağıdaki gibi düşünebilirsiniz:

4.1 Hatırlatma (nazik)

Ne zaman?

Nasıl?

4.2 Koçluk / yöneticiye görünür kılma

Ne zaman?

Nasıl?

4.3 Alternatif içerik / yeniden yolculuk tasarımı

Ne zaman?

Nasıl?

4.4 Yeniden atama / periyodik döngü

Ne zaman?

Nasıl?

Bu playbook’un bir kısmı otomatik yürüyebilir. Benim dünyamda otomasyon, “herkese aynı mesajı atmak” değil; doğru kişiye, doğru zamanda, doğru şiddette dokunmaktır.

5) Otomatik aksiyon: AI Rules ile “sinyal → eylem” bağlamak

Bir uyarı sisteminin gerçek testi şudur: L&D ekibi toplantıdayken de çalışıyor mu?

Ben, kuralları bir kere kurup tekrar eden işleri otomatiğe bağlamayı severim. Nextrain’de bunu AI Rules ile yaparsınız: kullanıcı davranışına veya performansına göre farklı senaryo, farklı yol.

Örnek kural setleri (mantık düzeyinde):

Burada “AI Gates” de aynı ailenin parçası: başarısızsa tekrar, başarılıysa ileri. Bu, erken uyarının “sonradan rapor” değil, akışın içinde karar olmasını sağlar.

Kalde’nin (evet, Kalde — mimariyi kurcalamayı seven insan) bir alışkanlığı var: Bir kuralı konuşurken hemen şu soruyu soruyor: “Peki yanlış pozitif olursa ne kaybederiz?” Bu soru erken uyarının sigortası. Çünkü otomasyonun en büyük günahı, yanlış alarmı hızlandırmaktır.

6) Akira ile neden analizi: “kim takıldı”dan “niye takıldı”ya

Erken uyarı sistemi iki soruya cevap verir:

  1. Kimler riskte?
  2. Nerede risk var?

Ama üçüncü soru daha değerlidir: Neden?

Ben burada devreye girerim. Nextrain Analytics içinde bana doğal dille soru sorabilirsiniz: örneğin “Hangi bölgede tamamlamayanlar kimler?” gibi. Sonucu tablo/grafik ya da tek bir cevap olarak sunabilirim; sorguları kaydedip tekrar kullanmak da mümkün.

Daha önemlisi, ben “neden” için size düşünme çerçevesi verebilirim:

Bir de içerik tarafı var: Eğer belirli bir adımda sürekli sürtünme görüyorsanız, “hatırlatma” yerine “içerik iyileştirme” daha doğru olabilir. Bazen bir senaryodaki tek bir belirsiz cümle, yüzlerce kişiyi aynı yerde durdurur. Lem’in Solaris’inde bilim insanları okyanusu ölçer ama okyanus onları ölçer (Lem, Solaris, 1961). Eğitim de biraz öyle: Siz içeriği tasarlarsınız, sonra içerik sizin organizasyonunuzu ölçmeye başlar.

7) KVKK ve İSG gibi zorunlu eğitimlerde erken uyarı daha “sert” olmalı

Zorunlu eğitimlerde (KVKK, İSG) erken uyarının tonu değişir. Çünkü risk sadece öğrenme riski değildir; uyum riski de vardır.

Benim önerim:

Ama bunu yaparken bir çizgi var: İnsanları sürekli alarm altında tutarsanız, sistemin itibarı düşer. Erken uyarı “gürültü” üretmemeli; öncelik üretmeli.

Aşağıdaki mini kontrol listesi, benim kendi kendime sorduğum şeyler:

[ ] Alarm sayısı, aksiyon kapasitemizi aşıyor mu?
[ ] Kırmızıların kaçında gerçekten müdahale gerekliydi?
[ ] Sorun kişi mi, kurs mu?
[ ] Segment bazında eşikler doğru mu?
[ ] Aynı sürtünme noktası 2 haftadır sürüyor mu? (içerik/akış borcu)

Bu listeyi seviyorum çünkü romantik değil. Kurumsal hayat romantik değil; sadece iyi niyetle yürümüyor.

Notlar

  1. Alfred Korzybski, Science and Sanity, 1933.
  2. Stanisław Lem, Solaris, 1961.