Research Article
BibTex RIS Cite

Digital Fluency: A Scale Development Study

Year 2023, Issue: 58, 2541 - 2559, 27.12.2023
https://doi.org/10.53444/deubefd.1286954

Abstract

The contribution of digital fluency is important to increase teachers' professional motivation, support their personal development, meet their needs regarding the use of digital technologies in their profession, eliminate the generation gap between teachers and students, and raise awareness through teachers' continuous learning development. In this context, the digital fluency levels of teachers should be determined and the necessary training and seminars should be given.The aim of this study is to develop a valid and reliable scale that determines the digital fluency levels of teachers. The sample of the scale development study consisted of 1068 teachers working in public schools. Exploratory Factor Analysis was used to determine the construct validity of the Digital Fluency Scale and Confirmatory Factor Analysis was used to evaluate the construct validity of the resulting model. As a result of these processes, 29 items and five sub-dimensions were obtained: "digital citizenship, research and development, communication and collaboration, fluency and innovation, and critical thinking and redesign".

References

  • Aesaert, K., van Braak, J., Van Nijlen, D., & Vanderlinde, R. (2015). Primary school pupils' ICT competences: Extensive model and scale development. Computers & Education, 81, 326-344.
  • Altıner, S. (2019). Developıng dıgıtal literacıes of pre-service efl teachers through engagement with research, Yayımlanmamış Doktora Tezi. Bahçeşehir Üniversitesi,.
  • American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (AERA, APA ve NCME) (2014). Standards for educational & psychological testing (2014th ed.). Washington, DC: American Educational Research Association.
  • Aydın, A. (2015). Dijital vatandaşlık. Türk Kütüphaneciliği, 29(1), 142-146.
  • Balcı, A. (2015). Sosyal bilimlerde araştırma: yöntem, teknik ve ilkeler (2. Baskı). Ankara: Pegem
  • Bayrakçı, S. (2020). Dijital yetkinlikler bütünü olarak dijital okuryazarlık: Ölçek geliştirme çalışması (Yayımlanmamış Doktora tezi). Marmara Üniversitesi, Sosyal Bilimler Enstitüsü, Gazetecilik Anabilim Dalı Bilişim Bilim Dalı, İstanbul).
  • Briggs, C., & Makice, K. (2012). Digital fluency: Building success in the digital age. Digital Fluency Publisher.
  • Brown, T. A. (2015). Confirmatory factor analysis for applied research ( 2nd ed .). New York, NY: The Guilford Press. Google Scholar
  • Bozdoğan, D., & Özen, R. (2014). Use of ICT technologies and factors affecting pre- service elt teachers' perceived Ict self-efficacy. Turkish Online Journal of Educational Technology-TOJET, 13(2), 186-196.
  • Büyüköztürk, Ş. (2002). Faktör analizi: Temel kavramlar ve ölçek geliştirmede kullanımı. Kuram ve Uygulamada Eğitim Yönetimi, 32 (32), 470-483. https://dergipark.org.tr/en/pub/kuey/issue/10365/126871
  • Büyüköztürk, Ş., Kılıç-Çakmak, E., Akgün, Ö., Karadeniz, Ş., & Demirel, F. (2016). Bilimsel araştırma yöntemleri. Anı yayıncılık. Ankara
  • Chigona, A. (2018). Digital fluency: necessary competence for teaching and learning in connected classrooms. The African Journal of Information Systems, 10(4), 7.
  • Chou, Y. C., & Chiu, C. H. (2020). The development and validation of a digital fluency scale for preadolescents. The Asia-Pacific Education Researcher, 29(6), 541-551.
  • Cohen, R.J., & Swerdlik, M.E. (2018). Psikolojik test ve değerlendirme: Testlere ve ölçmeye giriş (Çev. E. Tavşancıl). Ankara: Nobel.
  • Costa, P. B., Prado, C., Oliveira, L. D. F. T. D., Peres, H. H. C., Massarollo, M. C. K. B., Fernandes, M. D. F. P., ... and Freitas, G. F. D. (2011). Digital fluency and the use of virtual environments: the characterization of nursing students.Revista da Escola de Enfermagem da USP, 45(SPE), 1589-1594.
  • Costa, P. B., Prado, C., Oliveira, L. D. F. T. D., Peres, H. H. C., Massarollo, M. C. K. B., Fernandes, M. D. F. P., ... and Freitas, G. F. D. (2011). Digital fluency and the use of virtual environments: the characterization of nursing students.Revista da Escola de Enfermagem da USP, 45(SPE), 1589-1594.
  • Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3), 297-334.
  • Çelik, S., & Aytın, K. (2014). Teachers’ views on digital educational tools in english language learning: Benefits and Challenges in the Turkish Context. TESL-EJ, 18(2).
  • Çokluk, Ö., Şekercioğlu, G. ve Büyüköztürk, Ş. (2016). Sosyal bilimler için çok değişkenli istatistik. Ankara: Pegem Akademi.
  • Davis, L. L. (1992). Instrument review: Getting the most from a panel of experts. Applied Nursing Research, 194-197.
  • Demir, K. (2018). Öğretmen adaylarının dijital akıcılıklarının incelenmesi. (Yayımlanmamış Doktora Tezi). Anadolu Üniversitesi Eğitim Bilimleri Enstitüsü, Eskişehir.
  • DeVellis, R. (2012). Scale development: The theory and applications (3rd ed.). Thousand Oaks, CA: SAGE Publications.
  • Durmuş, B., Yurtkoru, E. S., & Cinko, M. (2013). Data analysis with SPSS in social sciences. Istanbul: Beta Publication. (erişim tarihi: 13.08.2021).
  • Edwards, A., Joyner, K., & Schatschneider, C. (2019). A simulation study on the performance of different reliability estimation methods. https://doi.org/10.31234/ osf.io/xzc52 (erişim tarihi: 13.08.2021).
  • Erkuş, A. (2012). Psikolojide ölçme ve ölçek geliştirme 1: Temel kavramlar ve işlemler. Ankara: Pegem Akademi Yayınları.
  • Gliner, J. A., Morgan, G. A., & Leech, N. L. (2015). Uygulamada araştırma yöntemleri: Desen ve analizi bütünleştiren yaklaşım (2. Basımdan Çeviri) (Çev. Ed.: Selahattin Turan). Ankara: Nobel Yayıncılık (Orijinal eserin yayın tarihi: 2009).
  • Green, R. M. (2005). Predictors of digital fluency. (Yayımlanmamış doktora tezi) Northwestern Üniversitesi, Illinois, USA.
  • Hambleton, R.K., & Jones, R.W. (1993).Comparison of classical test theory and item response theory and their applications to test development.Educational Measurement: Issues and Practice, 12(2), 38–47.
  • Hicks, S. D. (2011). Technology in today’s classroom: Are you a tech-savvy teacher? The Clearing House, 84, 188-191. doi: 10.1080/00098655.2011.557406
  • Hooper, D., Coughlan, J., & Mullen, M. R. (2008). Structural equation modelling: Guidelines for determining model fit. Electronic Journal of Business Research Methods, 6(1), 53– 60. https://doi.org/10.21427/D7CF7R
  • Hu, L. T., Bentler, P. M., & Kano, Y. (1992). Can test statistics in covariance structure analysis be trusted?. Psychological bulletin, 112(2), 351.
  • ISTE-International Society for Technology in Education (2018). https://id.iste.org/docs/Standar- ds-Resources/iste-standards-edleaders_v3.pdf (Erişim Tarihi:11/09/2021).
  • Jöreskog, K. G., & Sörbom, D. (1993). LISREL 8: Structural equation modeling with the SIMPLIS command language. USA: Scientific Software International.
  • Kalaycı, Ş. (2006). Faktör analizi. SPSS uygulamalı çok değişkenli istatistik teknikleri. Ankara: Asil Yayın Dağıtım.
  • Karasar, N. (2013). Bilimsel araştırma yöntemi. (25. Baskı). Nobel Yayın Dağıtım
  • Kim, S., Chung, K. & Yu, H. (2013). Enhancing digital fluency through a training program for creative problem solving using computer programming. The Journal of Creative Behavior, 47(3), 171-199.
  • Kirton, M. J. (2003). Adaption-Innovation In the Context of Diversity. Canada: Routledge.
  • Kline, P. (1994). An easy guide to factor analysis. New York: Routledge.
  • Lei, J. (2009). Digital natives as preservice teachers: What technology preparation is needed?. Journal of Computing in teacher Education, 25(3), 87-97.
  • Lindsey, L. (2015). Preparing teacher candidates for 21st century classrooms: A study of digital citizenship. Arizona State University.
  • McKnight, K., O'Malley, K., Ruzic, R., Horsley, M. K., Franey, J. J., & Bassett, K. (2016). Teaching in a digital age: How educators use technology to improve student learning. Journal of research on technology in education, 48(3), 194-211.
  • Miller, C., & Bartlett, J. (2012). 'Digital fluency': towards young people's critical use of the internet. Journal of Information Literacy, 6(2), 35-55.
  • NETS Project and S. Brooks-Young (2007) National educational standards for students, Second edition. Eugene, OR: International Society for Technology in Education.
  • Özdamar, K. (2016). Eğitim, sağlık ve davranış bilimlerinde ölçek ve test geliştirme yapısal eşitlik modellemesi: IBM,SPSS; IBM SPSS ve MINITAB uygulamalı. Eskişehir: Nisan Kitapevi.
  • Pinho, I. D. C. & Lima, M. D. S. (2013). Teacher's digital fluency: A new competence for foreigh language teaching. Revista Brasileira de Linguística Aplicada, 13(3), 711-739.
  • Porat, E., Blau, I., & Barak, A. (2018). Measuring digital literacies: Junior high-school students' perceived competencies versus actual performance. Computers & Education, 126, 23-36.
  • Resnick, M., Maloney, J., Monroy-Hernández, A., Rusk, N., Eastmond, E., Brennan, K., ... & Kafai, Y. (2009). Scratch: programming for all. Communications of the ACM, 52(11), 60-67.
  • Rodríguez-de-Dios, I., van Oosten, J.M., Igartua, J.J. (2018). A study of the relationship between parental mediation and adolescents’ digital skills, online risks and online opportunities. Comput. Hum. Behav. 82, 186–198.
  • Stewart, D. W., & Shamdasani, P. N. (2014). Focus groups: Theory and practice (Vol. 20). Sage publications.
  • Şencan, H. (2005). Sosyal ve davranışsal ölçümlerde güvenirlik ve geçerlik. Ankara : Seçkin yayınları.
  • Tabachnick, B. G., & Fidell, L. S. (2019). Using multivariate statistics (7th ed.). Boston, MA: Allyn and Bacon.
  • Tavşancıl, E. (2010). Tutumların ölçülmesi ve SPSS ile veri analizi. Ankara: Nobel Yayıncılık.
  • Tekin, H. (2018). Eğitimde ölçme ve değerlendirme (27 b.). Ankara: Yargı Yayınevi.
  • Tezbaşaran, A. (2008). Likert tipi ölçek hazırlama kılavuzu [Elektronik versiyon]. Adana: Üçüncü sürüm e-kitap.
  • Thompson, B. (2004).Exploratory and confirmatory factor analysis: Understanding concepts and applications. American Psychological Association.
  • Wang, Q, Myers M. D., ve Sundaram D. (2013). Digital natives and digital ımmigrants towards a model of digital fluency. (in English), Business & Information Systems Engineering, vol. 5, no. 6, pp. 409-419.
  • Yazıcıoğlu, Y., & Erdoğan, S. (2004). SPSS uygulamalı bilimsel araştırma yöntemleri. Ankara: Detay Yayıncılık.
  • Zhang, H., & Zhu, C. (2016). A study of digital media literacy of the 5th and 6th grade primary students in Beijing. The Asia-Pacific Education Researcher, 25(4), 579– 592. https://doi.org/10.1007/s40299-016-0285

Dijital Akıcılık: Bir Ölçek Geliştirme Çalışması

Year 2023, Issue: 58, 2541 - 2559, 27.12.2023
https://doi.org/10.53444/deubefd.1286954

Abstract

Öğretmenlerin mesleki motivasyonu artırmak, kişisel gelişimlerini desteklemek, mesleklerinde dijital teknolojilerin kullanımıyla ilgili ihtiyaçlarını karşılamak, öğretmenler ve öğrenciler arasındaki kuşak farkını ortadan kaldırmak ve öğretmenlerin sürekli öğrenme gelişimi yoluyla farkındalığın artırılması için dijital akıcılığın katkısı önemlidir. Bu kapsamda öğretmenlerin dijital akıcılık düzeylerini belirleyerek ihtiyaç duyulan eğitim, kurs ve seminerler verilmelidir. Bu çalışmanın amacı öğretmenlerin dijital akıcılık düzeylerini belirleyen geçerli ve güvenilir bir ölçek geliştirmektir. Ölçek geliştirme çalışmasının örneklemini, devlet okullarında görev yapan 1068 öğretmen oluşturmuştur. Dijital Akıcılık Ölçeğinin yapı geçerliğini belirlemek için Açımlayıcı Faktör Analizi ve ortaya çıkan modelin yapı geçerliğini değerlendirmek için Doğrulayıcı Faktör Analizi yapılmıştır. Bu süreçler sonucunda 29 madde ve “dijital vatandaşlık, araştırma ve geliştirme, iletişim ve iş birliği, akıcılık ve yenilik ile eleştirel düşünme ve yeniden tasarlama” olmak üzere beş alt boyutlu ölçek elde edilmiştir.

References

  • Aesaert, K., van Braak, J., Van Nijlen, D., & Vanderlinde, R. (2015). Primary school pupils' ICT competences: Extensive model and scale development. Computers & Education, 81, 326-344.
  • Altıner, S. (2019). Developıng dıgıtal literacıes of pre-service efl teachers through engagement with research, Yayımlanmamış Doktora Tezi. Bahçeşehir Üniversitesi,.
  • American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (AERA, APA ve NCME) (2014). Standards for educational & psychological testing (2014th ed.). Washington, DC: American Educational Research Association.
  • Aydın, A. (2015). Dijital vatandaşlık. Türk Kütüphaneciliği, 29(1), 142-146.
  • Balcı, A. (2015). Sosyal bilimlerde araştırma: yöntem, teknik ve ilkeler (2. Baskı). Ankara: Pegem
  • Bayrakçı, S. (2020). Dijital yetkinlikler bütünü olarak dijital okuryazarlık: Ölçek geliştirme çalışması (Yayımlanmamış Doktora tezi). Marmara Üniversitesi, Sosyal Bilimler Enstitüsü, Gazetecilik Anabilim Dalı Bilişim Bilim Dalı, İstanbul).
  • Briggs, C., & Makice, K. (2012). Digital fluency: Building success in the digital age. Digital Fluency Publisher.
  • Brown, T. A. (2015). Confirmatory factor analysis for applied research ( 2nd ed .). New York, NY: The Guilford Press. Google Scholar
  • Bozdoğan, D., & Özen, R. (2014). Use of ICT technologies and factors affecting pre- service elt teachers' perceived Ict self-efficacy. Turkish Online Journal of Educational Technology-TOJET, 13(2), 186-196.
  • Büyüköztürk, Ş. (2002). Faktör analizi: Temel kavramlar ve ölçek geliştirmede kullanımı. Kuram ve Uygulamada Eğitim Yönetimi, 32 (32), 470-483. https://dergipark.org.tr/en/pub/kuey/issue/10365/126871
  • Büyüköztürk, Ş., Kılıç-Çakmak, E., Akgün, Ö., Karadeniz, Ş., & Demirel, F. (2016). Bilimsel araştırma yöntemleri. Anı yayıncılık. Ankara
  • Chigona, A. (2018). Digital fluency: necessary competence for teaching and learning in connected classrooms. The African Journal of Information Systems, 10(4), 7.
  • Chou, Y. C., & Chiu, C. H. (2020). The development and validation of a digital fluency scale for preadolescents. The Asia-Pacific Education Researcher, 29(6), 541-551.
  • Cohen, R.J., & Swerdlik, M.E. (2018). Psikolojik test ve değerlendirme: Testlere ve ölçmeye giriş (Çev. E. Tavşancıl). Ankara: Nobel.
  • Costa, P. B., Prado, C., Oliveira, L. D. F. T. D., Peres, H. H. C., Massarollo, M. C. K. B., Fernandes, M. D. F. P., ... and Freitas, G. F. D. (2011). Digital fluency and the use of virtual environments: the characterization of nursing students.Revista da Escola de Enfermagem da USP, 45(SPE), 1589-1594.
  • Costa, P. B., Prado, C., Oliveira, L. D. F. T. D., Peres, H. H. C., Massarollo, M. C. K. B., Fernandes, M. D. F. P., ... and Freitas, G. F. D. (2011). Digital fluency and the use of virtual environments: the characterization of nursing students.Revista da Escola de Enfermagem da USP, 45(SPE), 1589-1594.
  • Cronbach, L. J. (1951). Coefficient alpha and the internal structure of tests. Psychometrika, 16(3), 297-334.
  • Çelik, S., & Aytın, K. (2014). Teachers’ views on digital educational tools in english language learning: Benefits and Challenges in the Turkish Context. TESL-EJ, 18(2).
  • Çokluk, Ö., Şekercioğlu, G. ve Büyüköztürk, Ş. (2016). Sosyal bilimler için çok değişkenli istatistik. Ankara: Pegem Akademi.
  • Davis, L. L. (1992). Instrument review: Getting the most from a panel of experts. Applied Nursing Research, 194-197.
  • Demir, K. (2018). Öğretmen adaylarının dijital akıcılıklarının incelenmesi. (Yayımlanmamış Doktora Tezi). Anadolu Üniversitesi Eğitim Bilimleri Enstitüsü, Eskişehir.
  • DeVellis, R. (2012). Scale development: The theory and applications (3rd ed.). Thousand Oaks, CA: SAGE Publications.
  • Durmuş, B., Yurtkoru, E. S., & Cinko, M. (2013). Data analysis with SPSS in social sciences. Istanbul: Beta Publication. (erişim tarihi: 13.08.2021).
  • Edwards, A., Joyner, K., & Schatschneider, C. (2019). A simulation study on the performance of different reliability estimation methods. https://doi.org/10.31234/ osf.io/xzc52 (erişim tarihi: 13.08.2021).
  • Erkuş, A. (2012). Psikolojide ölçme ve ölçek geliştirme 1: Temel kavramlar ve işlemler. Ankara: Pegem Akademi Yayınları.
  • Gliner, J. A., Morgan, G. A., & Leech, N. L. (2015). Uygulamada araştırma yöntemleri: Desen ve analizi bütünleştiren yaklaşım (2. Basımdan Çeviri) (Çev. Ed.: Selahattin Turan). Ankara: Nobel Yayıncılık (Orijinal eserin yayın tarihi: 2009).
  • Green, R. M. (2005). Predictors of digital fluency. (Yayımlanmamış doktora tezi) Northwestern Üniversitesi, Illinois, USA.
  • Hambleton, R.K., & Jones, R.W. (1993).Comparison of classical test theory and item response theory and their applications to test development.Educational Measurement: Issues and Practice, 12(2), 38–47.
  • Hicks, S. D. (2011). Technology in today’s classroom: Are you a tech-savvy teacher? The Clearing House, 84, 188-191. doi: 10.1080/00098655.2011.557406
  • Hooper, D., Coughlan, J., & Mullen, M. R. (2008). Structural equation modelling: Guidelines for determining model fit. Electronic Journal of Business Research Methods, 6(1), 53– 60. https://doi.org/10.21427/D7CF7R
  • Hu, L. T., Bentler, P. M., & Kano, Y. (1992). Can test statistics in covariance structure analysis be trusted?. Psychological bulletin, 112(2), 351.
  • ISTE-International Society for Technology in Education (2018). https://id.iste.org/docs/Standar- ds-Resources/iste-standards-edleaders_v3.pdf (Erişim Tarihi:11/09/2021).
  • Jöreskog, K. G., & Sörbom, D. (1993). LISREL 8: Structural equation modeling with the SIMPLIS command language. USA: Scientific Software International.
  • Kalaycı, Ş. (2006). Faktör analizi. SPSS uygulamalı çok değişkenli istatistik teknikleri. Ankara: Asil Yayın Dağıtım.
  • Karasar, N. (2013). Bilimsel araştırma yöntemi. (25. Baskı). Nobel Yayın Dağıtım
  • Kim, S., Chung, K. & Yu, H. (2013). Enhancing digital fluency through a training program for creative problem solving using computer programming. The Journal of Creative Behavior, 47(3), 171-199.
  • Kirton, M. J. (2003). Adaption-Innovation In the Context of Diversity. Canada: Routledge.
  • Kline, P. (1994). An easy guide to factor analysis. New York: Routledge.
  • Lei, J. (2009). Digital natives as preservice teachers: What technology preparation is needed?. Journal of Computing in teacher Education, 25(3), 87-97.
  • Lindsey, L. (2015). Preparing teacher candidates for 21st century classrooms: A study of digital citizenship. Arizona State University.
  • McKnight, K., O'Malley, K., Ruzic, R., Horsley, M. K., Franey, J. J., & Bassett, K. (2016). Teaching in a digital age: How educators use technology to improve student learning. Journal of research on technology in education, 48(3), 194-211.
  • Miller, C., & Bartlett, J. (2012). 'Digital fluency': towards young people's critical use of the internet. Journal of Information Literacy, 6(2), 35-55.
  • NETS Project and S. Brooks-Young (2007) National educational standards for students, Second edition. Eugene, OR: International Society for Technology in Education.
  • Özdamar, K. (2016). Eğitim, sağlık ve davranış bilimlerinde ölçek ve test geliştirme yapısal eşitlik modellemesi: IBM,SPSS; IBM SPSS ve MINITAB uygulamalı. Eskişehir: Nisan Kitapevi.
  • Pinho, I. D. C. & Lima, M. D. S. (2013). Teacher's digital fluency: A new competence for foreigh language teaching. Revista Brasileira de Linguística Aplicada, 13(3), 711-739.
  • Porat, E., Blau, I., & Barak, A. (2018). Measuring digital literacies: Junior high-school students' perceived competencies versus actual performance. Computers & Education, 126, 23-36.
  • Resnick, M., Maloney, J., Monroy-Hernández, A., Rusk, N., Eastmond, E., Brennan, K., ... & Kafai, Y. (2009). Scratch: programming for all. Communications of the ACM, 52(11), 60-67.
  • Rodríguez-de-Dios, I., van Oosten, J.M., Igartua, J.J. (2018). A study of the relationship between parental mediation and adolescents’ digital skills, online risks and online opportunities. Comput. Hum. Behav. 82, 186–198.
  • Stewart, D. W., & Shamdasani, P. N. (2014). Focus groups: Theory and practice (Vol. 20). Sage publications.
  • Şencan, H. (2005). Sosyal ve davranışsal ölçümlerde güvenirlik ve geçerlik. Ankara : Seçkin yayınları.
  • Tabachnick, B. G., & Fidell, L. S. (2019). Using multivariate statistics (7th ed.). Boston, MA: Allyn and Bacon.
  • Tavşancıl, E. (2010). Tutumların ölçülmesi ve SPSS ile veri analizi. Ankara: Nobel Yayıncılık.
  • Tekin, H. (2018). Eğitimde ölçme ve değerlendirme (27 b.). Ankara: Yargı Yayınevi.
  • Tezbaşaran, A. (2008). Likert tipi ölçek hazırlama kılavuzu [Elektronik versiyon]. Adana: Üçüncü sürüm e-kitap.
  • Thompson, B. (2004).Exploratory and confirmatory factor analysis: Understanding concepts and applications. American Psychological Association.
  • Wang, Q, Myers M. D., ve Sundaram D. (2013). Digital natives and digital ımmigrants towards a model of digital fluency. (in English), Business & Information Systems Engineering, vol. 5, no. 6, pp. 409-419.
  • Yazıcıoğlu, Y., & Erdoğan, S. (2004). SPSS uygulamalı bilimsel araştırma yöntemleri. Ankara: Detay Yayıncılık.
  • Zhang, H., & Zhu, C. (2016). A study of digital media literacy of the 5th and 6th grade primary students in Beijing. The Asia-Pacific Education Researcher, 25(4), 579– 592. https://doi.org/10.1007/s40299-016-0285
There are 58 citations in total.

Details

Primary Language Turkish
Subjects Studies on Education
Journal Section Articles
Authors

Metin Altunkaynak 0000-0001-6947-7526

Zekiye Çağımlar 0000-0002-2022-0014

Publication Date December 27, 2023
Published in Issue Year 2023 Issue: 58

Cite

APA Altunkaynak, M., & Çağımlar, Z. (2023). Dijital Akıcılık: Bir Ölçek Geliştirme Çalışması. Dokuz Eylül Üniversitesi Buca Eğitim Fakültesi Dergisi(58), 2541-2559. https://doi.org/10.53444/deubefd.1286954