Research Article
BibTex RIS Cite

ETKİLEŞİMLİ SES ÜRETİM BAĞLAMINDA JEST TABANLI DİJİTAL ENSTRÜMAN PROTOTİPİ

Year 2025, Volume: 11 Issue: 2, 327 - 332
https://doi.org/10.22252/ijca.1808608

Abstract

Bu çalışma, insan hareketlerinin ses üretim süreçleriyle etkileşimini konu alan jest kontrollü bir interaktif enstrümana ve enstrüman arayüzüne dair tasarım ve uygulama sürecini ele almaktadır. Tasarım, Arduino UNO mikrodenetleyicisi ve HC-SR04 ultrasonik mesafe sensörü kullanılarak oluşturulmuş, sensörden elde edilen mesafe verileri seri iletişim protokolü aracılığıyla Max/MSP yazılım ortamına aktarılmıştır. Max/MSP içerisinde bu veriler gerçek zamanlı olarak işlenmiş, belirli aralıklara göre ölçeklendirilerek frekans birimlerine dönüştürülmüştür. Böylece kullanıcı, fiziksel temasa ihtiyaç duymaksızın el hareketleriyle sesin perde ve tını özelliklerini kontrol edebilmiştir. Tasarımın açık kaynak donanım ve yazılım bileşenleriyle gerçekleştirilmiş olması, düşük maliyetli ve esnek bir etkileşimli müzik sistemi ortaya koymuştur. Çalışma, theremin benzeri temassız çalgıların dijital çağda yeniden yorumlanmasına katkı sağlamakta olup özellikle müzik teknolojisi, ses tasarımı ve performans sanatları alanlarında alternatif bir ifade aracı önermektedir. Gelecek araştırmalarda sistemin çoklu sensör yapıları, üç boyutlu hareket takibi ve makine öğrenmesi tabanlı jest tanıma yöntemleriyle geliştirilmesi planlanmaktadır.

References

  • Banzi, M., & Shiloh, M. (2014). Getting started with Arduino: The open source electronics prototyping platform (3rd ed.). Maker Media.
  • Doornbusch, P. (2004). Computer sound synthesis in 1951: The music of CSIRAC. Computer Music Journal, 28(1), 10–25. https://doi.org/10.1162/014892604322860569
  • Duman, O. (2019, April). Eğitimde Arduino kullanımı ile ilgili yapılan çalışmalar. In X. Uluslararası Eğitim Araştırmaları Kongresi Bildiri Kitabı (pp. 489–495). Gümüşhane Üniversitesi.
  • Florea, B. C. (2014, October 23–25). MIDI-based controller of electrical drives. In ECAI 2014 – 6th International Conference on Electronics, Computers and Artificial Intelligence (pp. 27–30). IEEE. https://doi.org/10.1109/ECAI.2014.7090185
  • Kurtuluş, M. (2023). Max/MSP ile ses tasarımı (Vol. 1). Efe Akademi Yayıncılık. ISBN: 978-625-6796-56-0
  • Margolis, M., Jepson, B., & Weldin, N. R. (2020). Arduino cookbook (3rd ed.). O’Reilly Media.
  • Miranda, E. R. (Ed.). (2021). Handbook of artificial intelligence for music: Foundations, advanced approaches, and developments for creativity. Springer Nature. https://doi.org/10.1007/978-3-030-72116-9

A GESTURE-BASED DIGITAL INSTRUMENT PROTOTYPE IN THE CONTEXT OF INTERACTIVE SOUND PRODUCTION

Year 2025, Volume: 11 Issue: 2, 327 - 332
https://doi.org/10.22252/ijca.1808608

Abstract

The present study addresses the design and implementation process of a gesture-controlled interactive instrument and instrument interface that explores the interaction between human movements and sound production processes. The design was created using an Arduino UNO microcontroller and an HC-SR04 ultrasonic distance sensor. The distance data obtained from the sensor was transferred to the Max/MSP software environment via a serial communication protocol. Within the Max/MSP framework, this data underwent real-time processing, scaling according to predefined intervals, and conversion into frequency units. This innovation enabled the user to modulate the pitch and timbre of the sound through manual manipulation, obviating the necessity for physical contact. The implementation of the design with open-source hardware and software components resulted in a low-cost and flexible interactive music system. The work contributes to the reinterpretation of theremin-like contactless instruments in the digital age and proposes an alternative means of expression, particularly in the fields of music technology, sound design, and performance arts. Subsequent research endeavours are envisaged to entail the enhancement of the system through the incorporation of multi-sensor structures, three-dimensional motion tracking, and machine learning-based gesture recognition methodologies.

References

  • Banzi, M., & Shiloh, M. (2014). Getting started with Arduino: The open source electronics prototyping platform (3rd ed.). Maker Media.
  • Doornbusch, P. (2004). Computer sound synthesis in 1951: The music of CSIRAC. Computer Music Journal, 28(1), 10–25. https://doi.org/10.1162/014892604322860569
  • Duman, O. (2019, April). Eğitimde Arduino kullanımı ile ilgili yapılan çalışmalar. In X. Uluslararası Eğitim Araştırmaları Kongresi Bildiri Kitabı (pp. 489–495). Gümüşhane Üniversitesi.
  • Florea, B. C. (2014, October 23–25). MIDI-based controller of electrical drives. In ECAI 2014 – 6th International Conference on Electronics, Computers and Artificial Intelligence (pp. 27–30). IEEE. https://doi.org/10.1109/ECAI.2014.7090185
  • Kurtuluş, M. (2023). Max/MSP ile ses tasarımı (Vol. 1). Efe Akademi Yayıncılık. ISBN: 978-625-6796-56-0
  • Margolis, M., Jepson, B., & Weldin, N. R. (2020). Arduino cookbook (3rd ed.). O’Reilly Media.
  • Miranda, E. R. (Ed.). (2021). Handbook of artificial intelligence for music: Foundations, advanced approaches, and developments for creativity. Springer Nature. https://doi.org/10.1007/978-3-030-72116-9
There are 7 citations in total.

Details

Primary Language Turkish
Subjects Music Technology and Recording
Journal Section Research Article
Authors

Can Paşa 0000-0001-9459-2200

Submission Date October 22, 2025
Acceptance Date November 4, 2025
Published in Issue Year 2025 Volume: 11 Issue: 2

Cite

APA Paşa, C. (2025). ETKİLEŞİMLİ SES ÜRETİM BAĞLAMINDA JEST TABANLI DİJİTAL ENSTRÜMAN PROTOTİPİ. İnönü Üniversitesi Kültür Ve Sanat Dergisi, 11(2), 327-332. https://doi.org/10.22252/ijca.1808608