Literature Search Performance of Artificial Intelligence Models in a Study titled ‘The Emergence of Political Exegesis’: The Case of ChatGPT
Öz
This study aims to examine the performance of the ChatGPT artificial intelligence model in academic literature review processes on the emergence and development of the concept of “political exegesis”. Literature review, which is an indispensable element of academic research, requires a systematic, critical and comprehensive evaluation of the existing body of knowledge in a particular field. Considering the time-consuming, effort-intensive and complex nature of traditional literature search methods, the capacity of artificial intelligence models to significantly accelerate, facilitate and potentially enrich this process has aroused great interest. In this context, this paper rigorously assesses the accuracy, scope and consistency of ChatGPT with the existing literature, particularly in the field of political exegesis, in terms of the accuracy, scope and coherence of the foundational works, scholarly articles and other relevant resources that it offers in the literature. The main point of discussion in the study is to what extent ChatGPT can be a reliable and effective tool in the context of literature review. There are a number of important limitations and key areas for improvement in the use of such sophisticated artificial intelligence models. Literature review is a high-level cognitive process that involves not only compiling existing knowledge, but also in-depth critical thinking, making connections between different pieces of information and creating original syntheses. Considering that artificial intelligence models are not yet as proficient as human researchers in such abstraction, interpretation and creative thinking skills, it is anticipated that they may face some limitations in identifying conceptual gaps in the literature or new research areas waiting to be explored. In addition, the timeliness of the knowledge bases accessed by artificial intelligence models is also of critical importance. Especially in dynamic and constantly evolving fields such as social sciences, outdated datasets can seriously jeopardize the validity and reliability of the results of literature reviews. More importantly, the possibility that artificial intelligence models may occasionally produce completely unsubstantiated or fabricated academic references may have unacceptable consequences in terms of academic integrity and scientific ethics. In this framework, while it is acknowledged that the ChatGPT artificial intelligence application is a potentially valuable tool for literature review as it offers quick and practical access to a wide range of information, it should be emphasized that the use of this and similar applications without careful control and critical filtering may lead to misleading and incomplete information, which may cause significant ethical problems.
Anahtar Kelimeler
‘Siyasal Tefsirin Ortaya Çıkışı’ Başlıklı Bir Çalışmada Yapay Zekâ Modellerinin Literatür Tarama Performansı: ChatGPT Özelinde
Öz
Bu çalışma, ChatGPT yapay zekâ modelinin, “siyasal tefsir” kavramının doğuşu ve gelişimi üzerine yapılan akademik literatür tarama süreçlerindeki performansını incelemeyi hedeflemektedir. Akademik araştırmaların vazgeçilmez bir unsuru olan literatür taraması, belirli bir alandaki mevcut bilgi birikiminin sistematik, eleştirel ve kapsamlı bir değerlendirmesini gerektirmektedir. Geleneksel literatür tarama yöntemlerinin her zaman için zaman alıcı, yoğun çaba gerektiren ve karmaşık olabilen yapısı düşünüldüğünde, yapay zekâ modellerinin bu süreci önemli ölçüde hızlandırma, kolaylaştırma ve potansiyel olarak zenginleştirme kapasitesi büyük bir ilgi uyandırmaktadır. Bu bağlamda bu makale, ChatGPT’nin özellikle siyasal tefsir alanındaki literatürde sunduğu temel eserlerin, bilimsel makalelerin ve diğer ilgili kaynakların doğruluğunu, kapsamını ve mevcut literatürle olan tutarlılık düzeyini titizlikle değerlendirmektedir. Çalışmanın temel tartışma noktası, ChatGPT’nin literatür taraması bağlamında ne derece güvenilir ve etkili bir araç olabileceği sorusudur. Zira bu tür sofistike yapay zekâ modellerinin kullanımında göz önünde bulundurulması gereken bir dizi önemli sınırlılık ve geliştirilmesi gereken kilit alan bulunmaktadır. Literatür taraması, salt mevcut bilgiyi derlemekten öte, derinlemesine eleştirel düşünmeyi, farklı bilgi parçaları arasında bağlantılar kurmayı ve özgün sentezler oluşturmayı içeren yüksek düzeyde bilişsel bir süreçtir. Yapay zekâ modellerinin henüz bu tür soyutlama, yorumlama ve yaratıcı düşünme becerilerinde insan araştırmacılar kadar yetkin olmadığı düşünüldüğünde, literatürdeki kavramsal boşlukları veya keşfedilmeyi bekleyen yeni araştırma alanlarını belirlemede bazı kısıtlamalarla karşılaşabileceği öngörülmektedir. Buna ek olarak, yapay zekâ modellerinin erişim sağladığı bilgi tabanlarının güncellik durumu da kritik bir öneme sahiptir. Özellikle sosyal bilimler gibi dinamik ve sürekli gelişen alanlarda, güncelliğini yitirmiş veri kümeleri, literatür taramalarının sonuçlarının geçerliliğini ve güvenilirliğini ciddi şekilde tehlikeye atabilir. Daha da önemlisi, yapay zekâ modellerinin zaman zaman tamamen asılsız veya uydurulmuş akademik referanslar üretebilme olasılığı, akademik dürüstlük ve bilimsel etik ilkeleri açısından kabul edilemez sonuçlar doğurabilir. Bu çerçevede, ChatGPT yapay zekâ uygulamasının, geniş bir bilgi yelpazesine hızlı ve pratik bir erişim sunması nedeniyle literatür taraması için potansiyel olarak değerli bir araç olduğu kabul edilmekle birlikte, bu ve benzeri uygulamaların dikkatli bir şekilde kontrol edilmeden ve eleştirel bir süzgeçten geçirilmeden kullanılmasının, yanıltıcı ve eksik bilgilere yol açabileceği ve bunun da önemli etik sorunlara neden olabileceği özellikle vurgulanmalıdır. Tekrarlayan veya benzer komutlar verildiğinde ChatGPT’nin mantıksal olarak tutarsız yanıtlar üretebilmesi de dikkate alınması gereken bir diğer önemli husustur.
Anahtar Kelimeler
