Değerlendirme

Değerlendirme veya değerlendirme , Latince değerden “güçlü, olmaya değer”, doğru ve profesyonel araştırma ve değerlendirme anlamına gelir .

genel bakış

Değerlendirme genellikle projelerin , süreçlerin ve işlevsel birimlerin (örneğin cihazlar, nesneler) yanı sıra organizasyonel birimlerin değerlendirilmesi veya değerlendirilmesi olarak anlaşılır. Bağlam, yapı, süreç, çaba ve sonuç dahil edilebilir. Genel olarak bir değerlendirme, bir şeyin istenen bir amacı yerine getirmek için uygun olup olmadığına ve ne ölçüde uygun göründüğüne dair temel araştırma olarak da anlaşılabilir. Dilbilimsel kullanımda, değerlendirme, inceleme ve analiz, belirli bir amaç yönelimi olmaksızın bir envanter anlamında eşanlamlı olarak kullanılır.

Değerlendirmenin uygulama alanları, örneğin eğitim , sosyal hizmet , idare , ekonomi veya siyasi tavsiyelerdir . Bir değerlendirme için, soruşturmayı, prosedürü ve sonuçları anlaşılır ve doğrulanabilir kılmak için veriler metodik olarak toplanır ve sistematik olarak belgelenir. Dahili ve harici veri toplama için standart prosedürler; sorgulama , gözlem, izleme , test , anket ve malzeme analizidir. Değerlendirme, belirlenen gerçek değerler ile önceden tanımlanmış, operasyonel hale getirilmiş ve gerekçelendirilmiş hedef değerlerin, tanımlanmış göstergeler bazında karşılaştırılmasıyla gerçekleştirilir. Değerlendirme belirli “kalite kriterlerini” karşılamalıdır: kullanışlılık ve objektifliğin temel gereksinimlerine ek olarak , bunlar güvenilirlik , geçerlilik , ekonomi ve standardizasyondur .

Değerlendirme, etkililiğin geriye dönük kontrolü, ileri görüşlü kontrol ve durumların ve süreçlerin anlaşılması olarak hizmet eder. Değerlendirme verilerine dayanarak, incelenen süreçler ayarlanabilir ve optimize edilebilir. Dağıtım zamanına bağlı olarak, aşağıdaki değerlendirme türleri ayırt edilir:

Öngörülü veya ileriye dönük değerlendirme
Bu, bir ölçüden önce gerçekleşir.
Biçimlendirici değerlendirme
Biçimlendirici veya sürece eşlik eden değerlendirme, bir önlem sırasında gerçekleştirilir. Tedbiri mümkün olan en iyi şekilde gerçekleştirmek ve istenmeyen gelişmeler olması durumunda düzeltmek için düzenli aralıklarla incelenir ve ara sonuçlar toplanır. Bu yeni önlemler sırayla değerlendirilebilir. Ek olarak, biçimlendirici değerlendirmenin bir parçası olarak, etkilenenlerden öznel izlenimler alma olasılığı vardır (geriye dönük çarpıtmalar olmaksızın).
Toplam değerlendirme
Özetleyici bir değerlendirme, sonuçları değerlendiren, yani bir ölçü tamamlandıktan sonra yapılan bir değerlendirmedir. Bu, bir önlemin etkinliğinin özet olarak değerlendirilmesini sağlar. Bu, tasarım, uygulama, etkinlik ve verimlilik ile ilgili olabilir.

İle araştırma değerlendirme ampirik doğrulanabilirlik arayışı birleştirir, ancak özel olarak bazı durumlarda ve pratik inceler.

Kelime kökeni

Kelime değerlendirme ilk olarak 19. yüzyılda Fransızcada ve 20. yüzyılın başlarında İngilizcede kullanılmıştır. In USA bunun 1930'lardan bu yana, modern anlamda kullanılmakta olan (çünkü Sekiz Yıl Çalışması tarafından 1933-1941 Ralph W. Tyler ve ark.). Tyler'ın davranışsal kavramı eleştirildi ve 1957'deki Sputnik şokundan sonra takip eden eğitim reformunda değiştirildi . Almanya'da, İngilizce kelime değerlendirmesi 1960'ların sonunda bu Amerikan geleneğinden benimsendi; Bunun için Christoph Wulf'un İngilizce yayınlarından oluşan bir çeviriler koleksiyonu önemliydi . a. müfredat araştırması bağlamında . "Değerlendirme" anlamına gelen kelime, başlangıçta, özellikle eğitim kurumlarının çalışmalarının değerlendirilmesine (1930'lardan beri müfredat geliştirme) daraltıldı. Bu arada, uzun süredir ABD'de olduğu gibi Almanya'da da diğer sosyal faaliyet alanları da “değerlendiriliyor”.

Sınır belirleme

Balzer'e göre, profesyonel olarak yürütülen değerlendirmeler, aşağıdaki kriterler açısından günlük değerlendirmelerden farklıdır:

  • açıkça tanımlanmış konu ile ilgili
  • uzmanlar tarafından yürütülür
  • Kesin olarak tanımlanmış ve açıklanan kriterlere dayalı değerlendirme (değerlendirme / değerlendirme kriterleri)
  • Ampirik veri toplama yoluyla bilgi elde etmek
  • Bilginin belirli kurallara göre sistematik olarak değerlendirilmesi

Balzer şunu ayırt eder: “Değerlendirme, bir değerlendirme nesnesinin, önceden tanımlanmış, gerçeklerle açıkça ilişkili ve gerekçelendirilmiş hedeflere ve kriterlere göre değerlendirildiği bir süreçtir. Bu, özellikle bunun için nitelikli kişiler tarafından sosyal bilim yöntemlerinin yardımıyla yapılır. Bir değerlendirme sürecinin ürünü, değerlendirmenin amacını optimize etmek ve gelecekteki eylemi desteklemek için, ilgili ve etkilenen olabildiğince çok kişiye açıklamalar, sağlam temelli yorumlar ve tavsiyeler şeklinde kullanılabilir sonuçların geri bildiriminden oluşur. "

Değerlendirme insanlar ya da (genellikle negatif) yaptırımlar ile ilişkili kurumların etkinliği bakımından incelenir ve gerçek anlamda değerlendirme olarak isimlendirilir edilebilir önlemlerin değerlendirilmesi ayırt edilmelidir. Bir hedef anlaşma temelinde bir başlangıç ​​araştırması yapılır ve daha sonra hedeflere ulaşılması için önlemler planlanır. Daha sonra , önlemlerin başarıya yol açıp açmadığını kontrol edebilecek ölçüm cihazları / değerlendirme kriterleri geliştirilmelidir . Muhtemelen uygulama sırasında yapılan ara anketlerden sonra, yeni hedef anlaşmalar yapmak ve döngüye yeniden girmek için önlemin başarısı son bir ankette kontrol edilir. Etkilenenler, sürecin uzlaşmaya dayalı olarak yürütülmesi ve yabancı çıkarlar ve belirsiz kriterler tarafından belirlenmemesi için katılımcı haline gelmelidir.

Modeller

Değerlendirmede esasen üç farklı yön vardır:

Metot odaklı

  • Hedeflere Yönelik Değerlendirme ( Ralph W. Tyler )
  • Metodolojik görüş ( Donald T. Campbell )
  • Değerlendirmeli Araştırma (EA Suchman)
  • Nedensel Genelleme (T. Cook)
  • Teori Odaklı Değerlendirme (H.-T. Chen)
  • Sanat Olarak Değerlendirme (LJ Cronbach)

Fayda odaklı

  • CIPP Modeli (DL Stufflebeam)
  • Değerlendirme Araştırması, Siyasi Bağlam ve Aydınlanma (CH Weiss)
  • Kullanım Odaklı Değerlendirme (MQ Patton)
  • Dört Seviye ( Donald Kirkpatrick )
  • Güçlendirme Değerlendirmesi (D. Fettermann)

Değerlendirme odaklı

  • Değerleme (M. Scriven)
  • Duyarlı Değerlendirme (RE Payı)
  • 4. Nesil - Yapılandırmacı Değerlendirme (Guba ve Lincoln)
  • Düşmanlık Değerlendirmesi (Owens & Wolf)
  • Uzmanlık Modeli (EW Eisner)

Yöntemler

Bortz ve Döring, üç tür yöntem arasında ayrım yapmaktadır:

Nüfusu tanımlama

"Bir durumun dağılımının ve arka planının değerlendirilmesine izin verir ve hedef nüfusun tanımlanmasını kolaylaştırır."

Keşif

“Müdahale süreçlerini ve etkilerini keşfetmeye hizmet ederler. Etki hipotezlerinin formülasyonunu veya spesifikasyonunu hedeflerler ve ilgili değişkenlerin tanımlanmasına ve faaliyete geçirilmesine yardımcı olurlar. "

Hipotez testi

"İncelenen müdahalenin anlamlı şekilde işlevselleştirilmiş etki kriterleri üzerindeki etkisini test ederler."

1976'da, Kuzey Ren-Vestfalya'da üniversite düzeyinde bir deneme vesilesiyle, Andreas Gruschka o zamandan beri kılavuzlara dahil edilenleri formüle etti: "Değerlendirmenin kalite kriterleri artık öncelikli olarak geçerlilik, güvenilirlik ve tarafsızlık değil, iletişim ve müdahaledir. , şeffaflık ve alaka düzeyi. "

Veri toplama ve veri işleme yöntemleri şunlardır:

Alanlar

Önemli uygulama alanları, örn. B.

Kalite Yönetimi

Değerlendirme, uzun süredir kalite yönetiminin ayrılmaz bir parçası olmuştur ( TQM , ISO 9000 , 2Q, Q2E). Gelen Efqm modeli , değerlendirme z. B. (işin) sonuçlarını müşteriler, çalışanlar ve toplumla birlikte kaydetmek için gereklidir. Burada değerlendirme , organizasyonel ve kalite geliştirme bağlamında süreç kontrolü için bir geri bildirim öğesi olarak işlev görür . Müdahalelerin gerçekten istenen sonuçları veya etkileri (neden-sonuç ilişkisi) üretip üretmediği kontrol edilir. Hem etkilenenlerin, yani çalışanlar ve müşterilerin algısına ilişkin öznel veriler, hem de şirket içinde dahili olarak kaydedilebilen nesnel performans göstergeleri kaydedilir.

Sonuçların değerlendirilmesine ek olarak, EFQM modeli ayrıca liderlik , strateji ve personel alanlarındaki süreçlerin, müdahalelerin ve önlemlerin doğrudan değerlendirilmesini gerektirir . Bu, süreçleri değerlendirmek ve nihayetinde iyileştirmek için öz değerlendirme yönteminin kullanıldığı yerdir . Şirket yöneticileri ve çalışanları kendilerini, ekiplerini ve organizasyonlarını belirlenen kriterlere göre değerlendirirler. Bunu yapmak için, kalite yönetimi (QM) için özel olarak geliştirilmiş en objektif, güvenilir ve geçerli araçları ve yöntemleri kullanırsınız. Eylem ve değişim önlemleri için öneriler, elde edilen verilere, değerlendirmelere ve kanıtlara dayanılarak türetilir.

Hem öz hem de dış değerlendirmeler kıyaslama ile desteklenebilir ve böylece daha anlamlı hale getirilebilir. Diğer karşılaştırılabilir kuruluşlardan gelen veriler, kıyaslama görevi görür. Kişinin kendi değerlerini ve dolayısıyla kendi durumunu değerlendirmek ve yorumlamak için standartlar sağlarlar. İdeal olarak, sektördeki en iyilerle somut temas da ortak öğrenmeyi sağlayabilir.

Bu tamamen iç değerlendirmelere ek olarak, sertifikasyon ve dış değerlendirmeler için gereklidir - zwecken gereklidir: dış bağımsız denetçiler aynı kriterleri kullanarak kuruluşu değerlendirir ve oylarını verir . EFQM veya ISO9000'in geleneksel yaklaşımları çoğunlukla çok doğrusal neden-sonuç modellerine dayanmaktadır. Diğer yaklaşımların örnekleri, örneğin Fredmund Malik'in sibernetik yaklaşımlarıdır .

Eğitim

Pedagojik veya andragojik teknik bir terim olarak değerlendirme, "etkinlik kontrolü, kontrolü ve yansıtma yoluyla eğitim alanında pratik bir önlemin daha iyi anlaşılması ve tasarlanması için süreçlerin ve sonuçların metodik olarak kaydedilmesi ve gerekçeli olarak değerlendirilmesi" anlamına gelir. alanından süreçleri ve sonuçları dahil Microdidactics olarak macrodidactics . Ayrıca tüm programlar değerlendirilebilir.

çevre

Şimdiye kadar, çevre koruma, ne ABD'de ne de Avrupa'da değerlendirmenin merkezi uygulama alanlarından biri olmamıştır. Birkaç istisna dışında, çevre sorunlarını değerlendirmeye yönelik sosyal bilim çalışmaları, özellikle enerji tüketimi, gürültüden korunma ve atık üretimi alanlarında, daha büyük politik programlar çerçevesinde bile oldukça nadirdir.

Bunun bir nedeni, sosyal bilimlerin çevre konularında yetkin bir temas noktası olarak nispeten düşük tanınmasında görülüyor ki bu, çevre bilincini artırmaya yönelik önlemlerin başarısızlığı nedeniyle ancak 1990'larda temelden değişti. Çevre eğitimi formülünün çevre bilinci oluşturması ve çevresel farkındalığın buna karşılık gelen bir davranışa yol açması çok sayıda sosyal bilim çalışmasıyla çürütüldükten ve çevresel olarak ilgili bireysel davranış için sosyal faktörlerin önemi vurgulandıktan sonra, çevre tartışması sosyal medyaya açılmaya başladı. bilim sorunları ve çevre sorunlarının tamamen teknik çözümlerle aşılabileceği görüşünü giderek terk etti.

Şu anda, çevresel değerlendirmelere olan talep büyük ölçüde kamu müşterileri tarafından belirlenmektedir. Sözleşmeler öncelikle siyasi programların veya bireysel projelerin değerlendirilmesi ile ilgilidir. Özellikle uluslararası kuruluşlarda, politik prosedürlerin uygulanmasında standart bir prosedür olarak çevresel değerlendirmelerin başlatılmasını hazırlamayı amaçlayan kalite gerekliliklerinin geliştirilmesine yönelik eğilimler belirlenebilir. Almanya'da, federal ve eyalet düzeyinde, siyasi otoriteler en iyi ihtimalle bu yöndeki ilk adımları attılar. Kentsel ve mekansal planlamada değerlendirmelerin büyük önemi nedeniyle, sosyal-bilimsel çevresel değerlendirmelerin mevcut, daha teknik odaklı (planlama) gibi süreçlere entegre edilerek oluşturulması gerekmektedir. B. çevresel etki değerlendirmesinin bölgesel ve belediye düzeyinde beklenilmesi daha olasıdır. Buna karşılık, şirketlerin yanı sıra dernekler ve sivil toplum kuruluşları tarafından çevresel değerlendirmelere yönelik özel talep hala çok düşüktür. Çevre yönetim sistemlerinin (örneğin EMAS) geliştirilmesine rağmen, sosyal bilim değerlendirmesinin bulgularını şirketlerin kalite yönetim sistemlerine entegre etmek henüz mümkün olmamıştır.

Arz tarafında, en azından devlet tarafından finanse edilen bazı araştırma enstitüleri pazara hakimdir. Bununla birlikte, yalnızca çevresel değerlendirmelerde uzmanlaşan enstitü yoktur. En gelişme Değerlendirme Merkezi'nde de Saarland Üniversitesi ve Sürdürülebilir Yönetim Merkezine de (CSM) Lüneburg Üniversitesi uzak buraya .

Özel istişarelerde bile, sadece birkaçı faaliyetlerini sosyal-bilimsel çevresel değerlendirmelere odaklamıştır. Burada bahsedilecek örnekler Sosyal-Ekolojik Araştırma Enstitüsü (ISOE) ve Ekolojik Ekonomik Araştırma Enstitüsüdür (IÖW). Buna ek olarak, Wuppertal Enstitüsü , Freiburg'daki Öko-Enstitüsü veya Heidelberg'deki IFEU Enstitüsü gibi yerleşik çevre bilimi enstitüleri , tekliflerini sosyal bilim araştırmaları yönünde genişletmişler, ancak bunu birincil iş alanı olarak görmeden ve gerçekleştirmeden ilgili geliştirme çalışması. Uygun önlemlerin uygulamaya konması için "sürdürülebilir kalkınma" konseptinden kaynaklanan artan talepler göz önünde bulundurulduğunda, değerlendirme pazarında geniş bir gelişme ve teklifin ilerici bir profesyonelleşmesi, buna rağmen çevre sektöründe de beklenebilir. zor başlangıç ​​pozisyonu.

Uluslararası kalkınma işbirliği

Kalkınma işbirliğindeki değerlendirmeler uzun bir geleneğe sahiptir. Odak noktası, projeleri ve programları değerlendirmektir.

Kalkınma işbirliği içinde ifade edilen değerlendirme kültürü, esas olarak, projelerde ve programlarda kullanılan fonların her zaman bağışçılara haklı gösterilmesi gerektiği ve haklı gösterilmesi gerektiği gerçeğinden kaynaklanmaktadır.

Kalkınma işbirliğinde değerlendirme yaklaşımları, özellikle Milenyum Deklarasyonu ve Paris Deklarasyonu olmak üzere uluslararası anlaşmalarla da güçlü bir şekilde şekillenmektedir. Kalkınma işbirliğinin genel bir ilkesi olarak sözde “uyum”, örneğin aktörlerin ortak değerlendirme talebinde yansıtılmaktadır. Almanya'da, devlet kurumları kendilerini “birleşik kalkınma işbirliği” yapmaya adamışlardır ve ayrıca değerlendirmelere tek tip bir yaklaşım için çabalamaktadırlar. Ortak ülkeler, müşteri rollerini ve değerlendirmenin yürütülmesini giderek daha fazla üstleniyor.

Değerlendirme nesneleri söz konusu olduğunda, odak noktası, performansın kanıtı olarak çıktı değerlendirmesinden kalkınma işbirliği alanındaki proje ve programların etkilerini (çıktıları ve etkileri) değerlendirmeye gittikçe daha fazla kaymaktadır. Biri, efekt zincirleri ve karmaşık değerlendirme tasarımlarıyla çalışır, örneğin: B. Mantıksal Çerçeve Matrisi ("Mantıksal Çerçeve").

Doğrusal nedensellik modellerine dayanan geleneksel değerlendirme kavramları ve yöntemleri, sibernetik yaklaşımlarla giderek daha fazla sorgulanmakta ve desteklenmekte ve hatta bastırılmaktadır. Organizasyonel gelişim ve değerlendirme alanında halihazırda gerçekleşmekte olana benzer bir gelişme. Yenilikçi (öz) değerlendirme yöntemleri arayışına ek olarak (ör. Öğrenme sarmalı), bilimsel olarak temelli kavramların (daha fazla) geliştirilmesi, değerlendirmenin temeli olarak görünür - örneğin B. hizmet kalitesi veya yaşam kalitesi kavramı - özellikle önemlidir. Gibi diğer sektörlerle karşılaştırıldığında Eğitim veya sağlık ve sosyal hizmetler gibi kalkınma işbirliğinde , nispeten az bilimsel bilgi birikimi (kanıt temeli) değerlendirmeye girer.

Organizasyonlar

Uluslararası alanda, BM , AB , OECD , IMF , GIZ vb. Kuruluşlar , belirli konularla ilgilenmenin yanı sıra, genel standartları ve yöntemleri de toplayan, geliştiren ve işleyen kendi değerlendirme departmanlarına sahiptir.

Almanca konuşulan bölgede Alman Değerlendirme Topluluğu, DeGeVal vardır. Çok sayıda metodolojik ve sektörel çalışma grubuna sahiptir ve değerlendirmelerin planlanması ve yürütülmesi için standartlar, tavsiyeler ve yönergeler yayınlar. Üyelerinin çoğunluğu Almanya ve Avusturya'dan geliyor. Ayrıca, Saarland'daki Değerlendirme Merkezi veya Avusturya'daki proEval gibi araştırma kuruluşları da değerlendirme konusunun profesyonelleştirilmesine katılır.

Ayrıca bakınız

Edebiyat

  • Lars Balzer: Değerlendirme projeleri nasıl başarılı olur? - Bütünleştirici bir teorik yaklaşım ve değerlendirme sürecine ilişkin deneysel bir çalışma. Verlag Empirische Pädagogik, Landau 2005, ISBN 3-937333-24-X .
  • Wolfgang Beywl: Değerlendirme metodolojisinin daha da geliştirilmesi üzerine. Duyarlı değerlendirme modelinin temeli, anlayışı ve uygulaması. Peter Lang, Frankfurt am Main 1984.
  • Jürgen Bortz, Nicola Döring: İnsan ve sosyal bilimciler için araştırma yöntemleri ve değerlendirme. 4. baskı. Springer, Berlin 2006.
  • H. Kromrey: Değerlendirme - karmaşık bir kavram. Değerlendirme ve değerlendirme araştırması kavramı ve metodolojisi. Uygulama için öneriler. Sosyal Bilimler ve Mesleki Uygulama 24 (2001), 105–129.
  • M. Ruep, G. Keller: Okul değerlendirmesi. Frankfurt am Main 2007.
  • James R. Sanders: Handbook of Evaluation Standards. W. Beywl ve T. Widmer tarafından çevrilen "Eğitim Değerlendirme Standartları Ortak Komitesi" standartları, 3. baskı, Wiesbaden 2006.
  • Reinhard Stockmann (Ed.): Handbook for Evaluation. Pratik bir eylem rehberi. Waxmann, Münster ve diğerleri 2007.
  • H. Wottawa, H. Thierau: Ders Kitabı Değerlendirmesi. 2. Baskı. Hans Huber, Bern 1998.
  • H. Wottawa: Değerlendirme. In: A. Krapp, B. Weidenmann (Ed.): Pedagojik Psikoloji. Beltz, Weinheim 2001, s. 649-674.

İnternet linkleri

Commons : Değerlendirme  - resimler, videolar ve ses dosyaları toplanması
Vikisözlük: Değerlendirme  - anlamların açıklamaları, kelime kökenleri, eşanlamlılar, çeviriler

Bireysel kanıt

  1. ^ Değerlendirme - Duden , Bibliographisches Institut ; 2017
  2. Lars Balzer, Andreas Frey, Peter Nenniger: Değerlendirme nedir ve nasıl çalışır? Ampirical Pedagoji, Journal on Theory and Practice of Educational Research (1999), 13 (4), 393-413 [1]
  3. K. Götz: Mesleki eğitimin değerlendirilmesi için. Deutscher Studienverlag, Weinheim; 1993
  4. Markus Pospeschill: Psikolojide Ampirik Yöntemler . bant 4010 . UTB, Münih 2013, ISBN 978-3-8252-4010-3 .
  5. Bkz.Craig Kridel, Robert V. Bullough: Sekiz Yıllık Araştırmanın Hikayeleri. New York Press Eyalet Üniversitesi, New York 2007; Peter Hlebowitsh: Ralph W. Tyler (1902-1994) . Test ve Müfredat Geliştirmeye Katkı, Danışmanlık Rolü, in: Education Encyclopedia, StateUniversity.com.
  6. Christoph Wulf (Ed.): Değerlendirme . Derslerin, müfredatın ve okul denemelerinin tanımı ve değerlendirilmesi. Bilim ve Uygulamada Eğitim 18, Piper, Münih 1972 ( içindekiler ).
  7. a b L. Balzer: Değerlendirme projeleri nasıl başarılı olur? - Bütünleştirici bir teorik yaklaşım ve değerlendirme sürecine ilişkin deneysel bir çalışma. Ampirik Pedagoji Yayınevi, Landau 2005.
  8. ^ Marvin C. Alkin, Christina A. Christie: Bir Değerlendirme Teorisi Ağacı. İçinde: Marvin C. Alkin (Ed.): Evaluation Roots. Teorisyenlerin Görüşlerini ve Etkilerini İzleme . Thousand Oaks: Sage 2004, sayfa 12-65.
  9. Bortz & Döring 2005, s.118.
  10. Andreas Gruschka (Ed.): Bir okul deneyi kontrol edildi . Eyleme dayalı eşlik eden araştırma kavramı olarak üniversite düzeyinde KB için değerlendirme tasarımı, Kronberg 1976, s. 142–151; sıklıkla alıntı yapılan veya yeniden formüle edilen, ör. B. Bortz & Döring 2006 veya Reinhard Stockmann: Almanya'da Değerlendirme. İçinde: Ders. (Ed.): Değerlendirme araştırması : Temeller ve seçilmiş araştırma alanları, Waxmann, Münster 3rd A. 2006, s. 15–46, burada s. 23.
  11. Almanca konuşulan alana kapsamlı bir genel bakış sağlayın : Widmer, Thomas / Beywl, Wolfgang / Fabian, Carlo (ed.) (2009): Evaluation. Sistematik bir kılavuz. Wiesbaden: VS Verlag.
  12. ^ Jost Reischmann: İleri eğitim değerlendirmesi . Öğrenme başarısını ölçülebilir hale getirmek, ileri eğitim iş yardımlarının temelleri, Luchterhand, Neuwied 2003, s.18; Augsburg 2.A.2006.