{"id":"58c72a3f-6489-42fb-be74-d99366016bc4","authors":[{"author":{"id":"502524cf-29b6-46be-ac02-ccb5824b2ed5","openalex_id":null,"orcid":"0000-0001-5074-7805","display_name":"Dilek Büyükahıska","works_count":1,"cited_by_count":0,"h_index":0,"last_institution":null,"country_code":null},"position":"1"},{"author":{"id":"d9e011d0-3f47-44c1-b68d-f27dd51fe31d","openalex_id":null,"orcid":"0000-0003-2438-9877","display_name":"Ahmet Can Uyar","works_count":1,"cited_by_count":0,"h_index":0,"last_institution":null,"country_code":null},"position":"0"}],"concepts":[],"publisher_name":null,"publisher_website_url":null,"publisher_info":null,"bib_extra":[],"journal_info":{"id":"7216ef39-cb58-44d0-9b64-5e786fb46864","slug":"doaj-21487456","sjr_quartile":null,"sjr_score":null,"sjr_year":null,"sjr_history":null,"jif":null,"jif_quartile":null,"jif_year":null,"doaj_seal":false,"is_curated":true,"ulke":"TR","url":"https://dergipark.org.tr/en/pub/ijate","h_index":null},"raw_data":{"abstract_tr":"Bu çalışma, ChatGPT'nin, Yapay Zeka (AI) dil modeli, İngilizceyi yabancı dil olarak (EFL) öğrenenlerin denemelerini notlandırmak için Otomatik Deneme Puanlama (AES) aracı olarak kullanılmasının etkinliğini araştırmaktadır. Korpus, B2 seviyesinde 10 EFL öğrencisi tarafından yazılmış analiz, karşılaştırma ve zıtlık, tanımlayıcı, anlatı ve görüş denemeleri dahil olmak üzere çeşitli türleri temsil eden 50 denemeden oluşur. İnsan dereceleyiciler ve ChatGPT (40 mini versiyon), denemeleri Uluslararası İngilizce Dil Test Sistemi (IELTS) GÖREV 2 Yazım bant tanımlayıcıları kullanarak puanladı. Nicel bir yaklaşım benimseyerek, üretilen puanları karşılaştırmak için Wilcoxon imzalı sıralama testleri ve Spearman korelasyon testleri kullanıldı ve iki puanlama yöntemi arasında önemli bir fark ortaya çıktı; insan puanlayıcılar ChatGPT'den daha yüksek puanlar veriyordu. Benzer şekilde, farklı derecelerde önemli farklılıklar da farklı derecelerde belirgindi; bu da makale türünün insan değerlendiriciler ile ChatGPT arasındaki uyumu etkileyen bir parametre olmadığını gösteriyordu. Sonuçta, ChatGPT'nin bir AES aracı olarak umut vaat ettiğini ancak gözlemlenen eşitsizliklerin pratik kullanım için yeterli yeterliliğe ulaşmadığını gösterdiği tartışıldı. Çalışma, EFL bağlamlarında makale değerlendirmesinin incelikli doğasına uymak için yapay zeka dil modellerinde iyileştirme gerekliliğini vurguluyor.","title_en":"Artificial intelligence as an automated essay scoring tool: A focus on ChatGPT","abstract_source":"openalex"},"openalex_id":"W4406212666","doi":"10.21449/ijate.1517994","title":"Artificial intelligence as an automated essay scoring tool: A focus on ChatGPT","publication_year":2025,"type":"article","cited_by_count":20,"is_open_access":true,"pdf_url":null,"abstract":"This study explores the effectiveness of using ChatGPT, an Artificial Intelligence (AI) language model, as an Automated Essay Scoring (AES) tool for grading English as a Foreign Language (EFL) learners’ essays. The corpus consists of 50 essays representing various types including analysis, compare and contrast, descriptive, narrative, and opinion essays written by 10 EFL learners at the B2 level. Human raters and ChatGPT (4o mini version) scored the essays using the International English Language Testing System (IELTS) TASK 2 Writing band descriptors. Adopting a quantitative approach, the Wilcoxon signed-rank tests and Spearman correlation tests were employed to compare the scores generated, revealing a significant difference between the two methods of scoring, with human raters assigning higher scores than ChatGPT. Similarly, significant differences with varying degrees were also evident for each of the various types of essays, suggesting that the genre of the essays was not a parameter affecting the agreement between human raters and ChatGPT. After all, it was discussed that while ChatGPT shows promise as an AES tool, the observed disparities suggest that it has not reached sufficient proficiency for practical use. The study emphasizes the need for improvements in AI language models to meet the nuanced nature of essay evaluation in EFL contexts.","source_name":"International Journal of Assessment Tools in Education","source_issn":null,"volume":null,"issue":null,"first_page":null,"last_page":null,"language":"en","url":null,"is_relevant":true,"thesis_level":null,"title_tr":"Yapay zeka, otomatik bir makale puanlama aracı olarak: ChatGPT'ye odaklanma","license_code":"CC-BY","license_url":null,"doi_status":"unknown","doi_last_checked":null,"merged_at":null,"lens_id":"022-155-473-751-803","patent_cited_by_count":null,"oa_colour":"Gold","created_at":"2026-05-03T01:07:13.271852+03:00","updated_at":"2026-05-17T02:44:17.757481+03:00","publisher":null,"merged_into":null}