Melek Gülşah Şahin

The aim of this research was to analyze and compare analytic rubric and general impression scoring in peer assessment. A total of 66 university students participated in the study and six of them were chosen as peer raters on a voluntary basis. In the research, students were supposed to prepare a sample study within the scope of scientific research methods course and were also expected to present their studies in class. While the students were giving a presentation, their course instructor and peer raters conducted scoring, firstly by using the analytic rubric and subsequently by using general impressions. Collected data were analyzed using the Rasch model. Consequently, it was found that students were distinguished from one another at a highly reliable rate using both scoring methods. Additionally, it was discovered that the differences between students' ability levels were better revealed when analytic rubric was used. It was ascertained that there was a high level positive correlation between the ability estimations obtained from the scores performed by the peers and the instructor, regardless of the scoring method used. Finally, it was determined that ability estimations, corresponding peer raters' analytic rubric and general impression scoring, held a positive and highly strong relation.

Forming an item pool for computerized adaptive testing requires a long and demanding process that may be challenging, both in terms of time and cost. Therefore, one may come across such questions as 'How should an optimal item pool be?' and/or 'How many items should exist in an item pool?' Although research with regard to the features to exist in an optimal item pool vary, there has been no consensus reached about how big the item pool size should be. In the current study, the effect of different item pool size and item distribution on ability estimation and item pool utilization was analysed. 36 different item pools were generated through SimulCAT software. Using 1,000 simulees, single session CAT environments were simulated and two different termination rules were used in the study. Findings of the study indicated that as the size of the item pool increased to a specific size, the precision of measurement increased and the number of unused items decreased. By examining the results according to b parameter, it was found that the effect of b parameter distribution over the results decreased.

This study aims to establish a model proposal for solving problems in the use of performance tasks at the high school level. The study which adopted qualitative research method was planned in two stages. First, the problems faced by high school teachers (n = 40) using performance tasks were determined, and for the second stage the opinions of academicians (n = 8) related to the solution of the determined problems were consulted. Three stakeholders were identified in solving the problems identified during the first step of the study; those being the university, the Ministry of National Education (MoNE), and the teachers. Although the perceptions of the teachers' use of performance tasks in general were positive, it was seen that there problems were experienced in their application. Emphasis was placed on the importance of communication between the university, the MoNE and the teachers in order to overcome these problems. For the effective function of performance tasks, points such as diversity in classroom practices, attention to the characteristics of students and environmental conditions, and the use of rubrics were emphasised.

Bu araştırmanın amacı okul iklimi (öğretmenin odağı ve morali, okul iklimini etkileyen öğrenciyle ve öğretmenle ilişkili faktörler)ve kaynaklarının (okulun eğitimsel kaynaklarının kalitesi, fiziksel altyapının kalitesi) Türkiye’deki 15 yaş grubu öğrencilerin PISA 2012 matematik okuryazarlığına etkisini incelemektir ve araştırma ilişkisel bir araştırmadır. Araştırmanın çalışma grubunu PISA 2012’ye Türkiye’den katılan 170 okul ve 4848 öğrenci oluşturmaktadır. Araştırma, PISA 2012 Türkiye uygulaması kapsamında 15 yaş grubundaki öğrencilere uygulanan matematik okuryazarlığı testi ve okul yöneticilerine uygulanan okul anketinden elde edilen veriler üzerinden yürütülmüştür. Veri analizinde robust maximum likelihood parametre kestirim yöntemine dayalı yol analizi ve LISREL 8.8 programı kullanılmıştır. Kurulan modelde en yüksek yol katsayının okul iklimiyle ilişkili öğretmen faktörleri indeksi ve okul iklimiyle ilişkili öğrenci faktörleri indeksi arasında olduğu; en düşük katsayının ise öğretmenin odağı indeksi ve okul iklimini etkileyen öğretmen faktörleri indeksi arasında olduğu gözlenmiştir ve tüm yol katsayıları pozitif ve anlamlı bulunmuştur. Ayrıca bu yol katsayılarının orta ve yüksek etki büyüklüğüne sahip olduğu görülmüştür. Modele ilişkin uyum indeksleri mükemmel uyuma işaret etmektedir. Bu bağlamda modele dayalı olarak okul iklimi ve okul kaynakları indekslerinin matematik okuryazarlığında etkili olduğu sonucuna varılmıştır.

Bu çalışmada eğitim alanında geliştirilmiş ölçeklerin “ölçek geliştirme
süreçlerinin” belirli ölçütler açısından incelenmesi amaçlanmıştır.
Çalışma kapsamına 2010-2016 yılları arasında Türkiye’de eğitim alanında
yayınlanmış olan 7 dergideki 72 makale dâhil edilmiştir. Makalelerin
incelenmesinde “Ölçek Geliştirme Süreci Kontrol Formu” kullanılmıştır.
Elde edilen bulgulara göre; makalelerde ölçülen yapının kuramsal temelleri tanımlanmakta ve ölçme aracının amacı belirtilmektedir. Ölçek maddelerin yazılma sürecinde kaynak tarama sıklıkla tercih edilirken neredeyse tüm çalışmalarda konu alanı uzmanlarından uzman görüşüne başvurulmuştur. Madde havuzu oluşturulurken olumsuz maddelere yer verildiği belirtilen makale sayısı az olmakla birlikte, hiçbir makalede kontrol maddelerine yer verilmesiyle ilgili bilgiye rastlanmamıştır. Yapı geçerliğinin belirlenmesinde AFA ve DFA genellikle beraber kullanılırken ölçüt geçerliği neredeyse hiç incelenmemiştir. Güvenirliğin kestirilmesinde ise tüm çalışmalarda iç tutarlılık anlamında güvenirlik belirlenirken, katsayı olarak ise Cronbach α katsayısı tercih edilmiştir

Giftedness/talentedness is one of the areas that is not fully defined yet, and its meaning and scope are highly debated in parallel with the concept of intelligence. Discussions about how gifted-ness/talentedness can be conceptualized, identified, supported and predicted are still ongoing. The concept of giftedness/talentedness and the initial studies on the education of talented and gifted pupils seem to extend to Plato. In this study, firstly the definitions of leading names in the field about giftedness were examined and then field-specific terms were tried to be described. Many documents especially The Constitution of Turkish Republic, laws, decree laws, by laws, circulars and the Convention on the Rights of the Child have been examined in relation to the topic. In terms of the practices in the field of education, the Ottoman Empire period was briefly reviewed and information about the practices in Turkey was given. As a result, despite all the work mentioned, it has been found that there are various problems in the education of gifted and talented children and in supporting their skills. In order to solve the problems experienced by talented and gifted children in Turkey, it is necessary to develop a government policy regarding the education of talented and gifted children.

In this study, it is aimed to examine the effect of classroom assessment on science and mathematics achievements. For this purpose, hierarchical linear modeling (HLM) is performed using variables of like learning science/maths, engage teaching in science/maths, confidence in science/ maths, and home resources for learning variables at the student level, and experience, education level, homework, and assessment at the teacher level. The sample of the study consists of 4th grade students who participated in TIMSS 2015 in Turkey. According to the findings; 36% of variance in science achievement, and 40% of variance in mathematics achievement are due to variability between classes. In a random coefficient model, all student variables were found to be statistically significant predictors of science and mathematics achievement. Among these variables, the greatest effect size is self-confidence variability. Only the teacher variables are added according to the Means as the outcome model; the teacher's experience and emphasis to national achievement tests of monitoring students' progress had a statistically significant effect on science and mathematics achievement. Finally, according to the intercept and slopes of the outcomes model, the most important variable is the emphasis to national achievement tests of monitoring students' progress in both science and mathematics.

Bu araştırmanın amacı PISA 2012 Türkiye örnekleminde matematiksel davranış ve matematik okuryazarlığını etkilediği düşünülen araçsal motivasyon, matematik benlik kavramı, matematik özyeterliği, matematik kaygısı, matematik ilgisi değişkenleri ile birlikte tanımlanan hibrit modeli test etmek ve modelin cinsiyet ve okul türü (genel lise, anadolu lisesi, meslek lisesi) açısından farklılaşıp farklılaşmadığını incelemektir. Bu doğrultuda yapılan ilişkisel araştırmanın evrenini PISA 2012’ye Türkiye’den katılan 4848 öğrenci, örneklemini ise Öğrenci Anketi’nin B formunu alan 15 yaş grubu 1441 öğrenci oluşturmaktadır. Araştırmada veri toplama aracı olarak PISA 2012 “Öğrenci Anketi-B formu” ve “Matematik Okuryazarlığı Testi” kullanılmıştır. Uyum indeksleri incelendiğinde ilk aşamada kurulan hibrit model ve her bir grup için model-veri uyumunun sağlandığı ve cinsiyet ile okul türü açısından modelin farklılaşmadığı görülmüştür. Ayrıca yol katsayıları incelendiğinde matematik okuryazarlığı değişkeninin en iyi yordayıcısının matematik özyeterliği olduğu ve matematiksel davranış değişkeninin en iyi yordayıcısının matematik ilgisi olduğu görülmüştür. Matematik özyeterliğinin matematik okuryazarlığını yordamada ve matematik ilgisinin ise matematiksel davranışı yordamada pozitif düzeyde büyük etkiye sahip olduğu gözlemlenmiştir. Araştırmanın sonucunda kurulan modelin matematiksel davranışın %44’ünü, matematik okuryazarlığının ise %39’unu açıkladığı görülmüştür.

Bu çalışmanın amacı eğitim alanında yapılmış ölçek uyarlama makalelerinin belirli ölçütler açısından incelenmesidir. Çalışmada 2005-2014 yılları arasında SSCI ve/veya ULAKBİM’de indekslenen 10 dergide yayınlanmış toplam 108 makale incelenmiştir. Makalelerin incelenmesinde araştırmacılar tarafından geliştirilen “Ölçek Uyarlama Süreci Kontrol Formu” kullanılmıştır.
Çalışmanın sonuçlarına göre; ölçek uyarlama çalışmalarında ölçme aracının amacının belirtildiği ve ölçülen yapının kuramsal temellerinin tanıtıldığı görülmüştür. Dilsel eşdeğerlik çalışmalarında genellikle geri çeviri yöntemi tercih edilirken, çevrilen hedef form genellikle sadece hedef gruba uygulanmıştır. Yapı geçerliğinin belirlenmesinde AFA ve DFA’nın araştırmaların çoğunda beraber kullanıldığı, ölçüt geçerliğinin ise genellikle incelenmediği sonucuna ulaşılmıştır. Uyarlanan ölçeğin güvenirliği hesaplanırken sıklıkla iç tutarlılık yöntemi tercih edilmiştir.
Çalışmaların bulgularında ise yapı geçerliğinin genellikle orijinal ölçek ile benzerlik gösterdiği, ölçekten madde çıkarıldığı durumlarda yerine yeni maddelerin önerilmediği görülmüştür.
ABSTRACT
This study aims at reviewing the articles written on scale adaptation in the field of education based on certain criteria. A total of 108 articles published in 10 journals indexed in SSCI and/or ULAKBIM during 2005–2014 were analyzed for this study. The “Scale Adaptation Process Check Form” developed by researchers was used in the analysis of the articles.
The results demonstrated that the purpose of the tools of measurement was stated and that the theoretical bases of the structures to be measured were described in the studies of scale adaptation. Conversely, in studies of linguistic equivalence, while the back translation method was normally used, the translated target forms were usually administered only to the target groups. It was concluded that the EFA and CFA were used in combination in most of the studies for determining the construct validity, whereas the criterion validity was not studied generally. The method of internal consistency was usually preferred in calculating the reliability of the scale adapted.
It was observed that the construct validity was generally similar to the one in the original scale, and that when an item was removed from the scale, no item was recommended as replacement for the removed item.

Öz Bu araştırmanın amacı, öğretmen adaylarının değerlendirilme tercihlerinin sıralama yargılarına dayalı olarak ölçeklendirilmesi yöntemiyle belirlenmesidir. Çalışmada veri toplama aracı olarak, eğitim fakültesi öğrencilerinin başarılarının değerlendirilmesinde tercih ettikleri ölçme araçlarını belirlemeye yönelik geliştirilen araç kullanılmıştır. Bu araç ile öğretmen adaylarının sekiz tane ölçme aracına ilişkin tercihlerini belirtmeleri istenmiştir. Araştırmaya, 2010-2011 öğretim yılı güz döneminde Hacettepe Üniversitesi Eğitim Fakültesi'nin beş farklı bölümünde öğrenim gören 163 öğrenci katılmıştır. Araştırma sonuçlarına göre öğretmen adaylarının en çok doğru-yanlış testlerini, en az ise performans görevlerini tercih ettikleri belirlenmiştir. Sonuçlar daha detaylı incelendiğinde ise geleneksel yaklaşımların tamamlayıcı yaklaşımlara göre daha üst sıralarda tercih edildiği bulgusuna ulaşılmıştır. Anahtar Kelimeler: değerlendirme tercihleri, ölçme araçları, ölçekleme, sıralama yargıları yöntemi Abstract The aim of this study is to determine the measurement tool preferences of pre-service teachers for the evaluation of their achievement via sorting judgments scaling method. In the study, an instrument was developed and used to collect data about the education faculty students' assessment preferences. By using this instrument, pre-service teachers were asked to state their assessment preferences among the eight measurement tools given to them. The sample of the study was 163 pre-service students from five different departments of Faculty of Education of Hacettepe University in 2010-2011 academic year. According to the results of the study, it was concluded that the true-false test were the most preferred tools; on the other hand, performance tasks were the least preferred ones. When the results of the study examined deeply, it was found that the classical measurement tools were preferred more than the alternative tools.

ÖZ: Bu çalışmanın amacı, Türkiye'deki 15 yaş öğrencilerinin Uluslararası Öğrenci Başarı Belirleme Programındaki (PISA) okuma becerisini etkilediği düşünülen öğrenme stratejilerinin incelenmesidir. Çalışmada öğrenme stratejileri arasında; keşfetme, kontrol ve ezberleme stratejileri yer almaktadır. Bu değişkenler yapısal eşitlik modeli analizlerinde kullanılmıştır. Çalışma kapsamında oluşturulan model için elde edilen analiz çıktıları, standart değerlerden yola çıkılarak uyum iyiliği değerleri bakımından karşılaştırılmış ve model-veri uyumunun sağlandığı görülmüştür. Araştırma sonuçlarına göre keşfetme, kontrol ve ezberleme stratejileri değişkenleri ve okuma becerisine ait başarı değişkeni arasındaki ilişkilerin tümü anlamlı çıkmış olup bu değişkenler okuma becerisi başarısının %30'unu açıklamıştır. Anahtar sözcükler: uluslararası öğrenci başarı belirleme programı (PISA), okuma becerisi, öğrenme stratejileri, yapısal eşitlik modeli (YEM) ABSTRACT: The purpose of this study is to investigate the learning strategies that affect reading literacy of 15-year-old Turkish students in Programme for International Student Assessment (PISA). Elaboration, control, and memorization strategies are defined as learning strategies. These variables are used to conduct structural equation modeling. In the study, the designed model's goodness of fit indexes are good enough according to standard values of fit indexes. According to research results, all the relations between elaboration, control, and memorization strategies and reading literacy are meaningful. The findings of the study indicate that 30% of the reading literacy could be explained by these observed variables. Keywords: programme for international student assessment (PISA), reading literacy, learning strategies, structural equation modeling (SEM) 1. GİRİŞ Bilim ve teknolojideki gelişmeler bireylerde olması beklenen nitelikleri hızla değiştirmektedir. Bu niteliklere temel oluşturacak beceriler ise büyük bir oranda eğitim sürecinde kazandırılabilir. Bu kazanımları belirleyebilmek adına ülkeler ulusal boyutta yürüttükleri öğrenci başarısı belirleme çalışmalarını uluslararası boyutta da sürdürmek, kendi öğrencilerinin başarı düzeylerini ve eğitim sistemini diğer ülkelerin verileri ile karşılaştırarak güçlü ve iyileştirmeye açık yönlerini belirlemek için uluslararası çalışmalara katılmaktadırlar. Bu çalışmalardan biri de Uluslararası Öğrenci Değerlendirme Programı'dır (The Programme for International Student Assessment– PISA). Ekonomik İşbirliği ve Kalkınma Teşkilâtı (Organization for Economic CoOperation and Development-OECD) tarafından düzenlenen PISA, öğrencilerin, okuma becerileri, matematik ve fen okuryazarlığı alanlarındaki bilgi ve becerilerinin değerlendirildiği uluslararası büyük çaplı eğitim araştırmalarından biridir. Üç yılda bir yapılan bu araştırmayla, OECD üyesi ülkeler ve diğer katılımcı ülkelerdeki (dünya ekonomisinin yaklaşık olarak %90'ı) 15 yaş grubu öğrencilerin modern toplumda yerlerini alabilmeleri için gereken temel bilgi ve becerilere ne ölçüde sahip oldukları değerlendirilmektedir (MEB, 2010). PISA projesinde her dönem okuma becerileri, matematik ve fen okuryazarlığı alanlarından sadece birine temel alan olarak ağırlık verilmektedir. Bununla birlikte, diğer iki alan da yapılan

Ölçme ve değerlendirme yöntemlerinin sınıf içi uygulamalarda etkili biçimde kullanılması, büyük ölçüde öğretmenlerin bu konudaki bilgi ve yeterliliğine bağlıdır. Bu nedenle öğretmen adaylarının bu konudaki bilgi ve yeterliliklerinin incelenmesi önem taşımaktadır. Bu çalışmada; üniversitelerin ilköğretim bölümleri ile ortaöğretim fen ve matematik alanlar eğitimi bölümlerinde öğrenim görmekte olan öğrencilerin ölçme ve değerlendirme yaklaşımlarına ilişkin yeterlilikleri incelenmiştir. Bu amaçla öğretmen adaylarına, ölçme ve değerlendirme yöntemleri hazırlama, uygulama ve puanlaması hakkındaki yeterliklerini sorgulayan bir anket uygulanarak, yeterlikleri belirlenmiştir. Elde edilen sonuçlara göre; öğretmen adaylarının yeni uygulanmaya başlanan ölçme yöntemlerine ilişkin yeterlik algılarının geleneksel yöntemlere göre daha düşük olduğu tespit edilmiştir.
Measurement and evaluation methods are effectively used in classroom practices that largely depend on teachers " knowledge and competence on this issue. For this reason, the investigation of pre-services teachers " knowledge and competence are critically important in this respect. In this study, the research group are the students studying primary departments and secondary education in science and mathematics education departments at universities, their attitudes to measurement and evaluation are examined. For this purpose, the pre-service teachers " competencies have been identified by the way of conducting a survey that questions about their proficiency perception of the preparation methods of measurement and evaluation, application and grading. It is indicated that proficiency perceptions of pre-service teachers on modern measurement methods are more distant in accordance with the classical methods according to the research results.