Audio Game Design

Audio-only games represent an alternative type of gaming genres that continuously evolves following the technolog- ical trends that boost the video-games market. Since augmented reality is now a widespread approach for producing new kind of immersive applications, including games, it is expected that audio-only games will be influenced by this approach. This work represents the beginning of an attempt to investigate the process of delivering augmented audio-only games, focusing on specific technical factors that can improve the user interaction and the overall game-play experience. In particularly, it focuses on a new augmented reality audio mixing process that is optimized for variable acoustic environments, allowing the development of new attractive titles of audio-only games.

O Audio Game Breu é um jogo eletrônico constituído exclusivamente por recursos sonoros produzido pela equipe de desenvolvimento de jogos Team Zeroth. O presente artigo pretende fazer uma análise dos elementos temporais presentes na composição musical do Audio Game Breu através de conceitos de temporalidade em música extraídos do livro Time of Music de Jonathan Kramer, ressaltando a capacidade da música alterar a percepção temporal do ouvinte, bem como a experiência interativa e imersiva do jogador. Conceitos outros como forma aberta, forma móbile, sobreposição vertical, eventos e momentos são apresentados. Tendo em vista a necessidade do compositor especializado em produzir áudio para Games de se criar música para acompanhar trechos lineares em custcenes, onde não há interação do jogador e de trechos não-lineares onde há interação do jogador, podendo se resumir em dezenas de horas de tempo de interação, se faz necessário uma maior reflexão acerca do estudo do tempo no contexto da criação de música para jogos eletrônicos.

Το παιχνίδι αποτελεί ανέκαθεν διδακτική δραστηριότητα. Η εκπαιδευτική προσέγγιση του παιχνιδιού οφείλει να προσαρμοστεί στη σύγχρονη εποχή και στις ιδιαίτερες ανάγκες των γενεών της ψηφιακής τεχνολογίας. Η παρούσα εισήγηση εκθέτει την πορεία από το παιχνίδι στο ηλεκτρονικό παιχνίδι και τέλος στο ηχητικό παιχνίδι με έμφαση στη διδακτική πτυχή και τα εκπαιδευτικά χαρακτηριστικά τους. Έπειτα, εστιάζει σε δύο συγκεκριμένα χαρακτηριστικά, το μοντέλο του παιχνιδιού ρόλων και την ηχητική μηχανική, τα οποία όρισαν τη δομή και το περιεχόμενο αντίστοιχα του προτεινόμενου εκπαιδευτικού παιχνιδιού Κρόνος. Το εκπαιδευτικό ηχητικό παιχνίδι ρόλων Κρόνος επιμορφώνει το μαθητή σχετικά με τη θεωρία και πράξη της ηλεκτροακουστικής σύνθεσης και του επιτρέπει να καλλιεργήσει τις ακουστικές του δεξιότητές και να εφαρμόσει δημιουργικά τις μουσικές του ιδέες μέσω της παιγνιακής δραστηριότητας.

According to the World Health Organization (2019), an estimated 217 million people worldwide are visually impaired and 36 million are blind. Although there are approximately 114,000 video games currently in active circulation (MobyGames, 2020), just over 700 of these are accessible to the visually impaired (AudioGames.net, n.d.-a).

This practice-oriented research project investigates the potential of audio games through the design and development of the Audio Game Hub and Blind Cricket. The games were created through iterative cycles of prototyping and public releases and stimulated and refined through the agency of voluntary user feedback. They were released on iOS and Android platforms and over a period of two years were downloaded over 130,000 times. They gathered insightful user reviews and won multiple nominations and awards. The project was presented at several conferences and featured on television and the Internet.

The research was activated by a form of agency I define as an Indie Designer/Developer. Here, one is an integrated agent who develops work through critical reflection from online reviews, relying heavily on the implementation of tacit knowing (Polanyi, 1967; Schön, 1984). As a ‘generalist’, the Indie Designer/Developer combines the role of researcher, designer, reflective practitioner, developer, publisher and entrepreneur.

Os jogos digitais são uma das principais linguagens da cultura digital. Como produto audiovisual, hipermidiático e interdisciplinar, os jogos envolvem a integração de diversos profissionais, em diferentes áreas de atuação. Uma de suas áreas é o design de áudio, que reúne as produções de músicas, efeitos sonoros e vozes na criação de um universo sonoro para o jogo, em íntima relação com o universo ficcional, com a visualidade e com o game design. Embora o campo de estudos do áudio para jogos já reúna uma série de trabalhos acadêmicos na última década, trata-se de um território ainda pouco desbravado, sobretudo no que diz respeito à integração do áudio com a criação de uma identidade estética e funcional ao jogo. Nesse sentido, essa tese tem o objetivo de propor um arcabouço conceitual que permita compreender a formação de identidade sonora em jogos, particularmente pela integração da sonoridade com uma “tétrade elementar” formada por estética, mecânica, história e tecnologia. Para tanto, realizou-se ampla revisão bibliográfica em diferentes campos interdisciplinares, como o áudio para games, o som para o cinema, a teoria dos mundos ficcionais e a ecologia acústica. Com isso, foi possível reapropriar conceitos existentes, bem como sugerir uma série de novos conceitos que auxiliaram a análise estética e funcional de casos concretos da sonoridade de jogos, tais como paleta sonora, perfil sonoro, assinatura sonora, cosmopoiese e caracterização ludofuncional.

Ludum, do latim, significa jogo. O presente artigo
busca abordar o processo criativo da composição
musical Ludum para flauta, violino e violoncelo, da
qual aplica conceitos e técnicas retirados do contexto
do Áudio Dinâmico para jogos eletrônicos e
reproduzindo-os fora deste contexto. Através de uma
adaptação musical dos papéis de jogador e interface,
foi trazida uma nova experiência de interatividade em
sua execução tanto para o compositor, intérpretes
(regente e instrumentistas), bem como para os
espectadores.

ABSTRACT In this paper we introduce an effective approach for game design based on auditory, non-speech, feedback. We describe the design and implementation of a mobile application -- Murky Shooting - that makes use of sound to engage the user in a shooting game experience. Further, we discuss the pros and cons of the mobile version compared with the former desktop version and conclude with a presentation of the preliminary results, which prove that auditory cues solely are sufficient to provide an effective way of interaction, allowing the user to improve his/her performance and keep immersion in the game narrative.

This dissertation is investigating audio sources and controllers for MBVG music based video-games and the diversity of methods to develop them. It is exploring the relationship between various production methods and technologies, in order to combine them and find the right balance. The evolution of technology made it possible to develop a variety of sound effects, specific controllers and music production methods in music games which gives the players a deep interactive experience. Music based video-games revolutionized the entertainment industry with a wide range of specific leading titles that transformed the business and spread their creativity into new innovative methods.
The project involved volunteers playing a music based video-game with two simulators - a guitar and a drum. In order to expose players to the difference in audio and controller options, the volunteers played their preferred instrument in two ways: a) pairing a synthesized audio version of the game with its recorded audio variation; b) a controller version with a touchscreen variant.
Based on their experience, they had to answer individually a survey with eleven questions in order to test the hypothesis by understanding which way of interacting with the game they preferred. Do certain themes in music oriented games benefit more from certain sources of music, sound effects and controllers than others?
The results obtained from the data analysis reveals that visuals are connected to audio as well as touch (controllers). This information has been assessed and discussed in the conclusion, comparing the averages and standard deviations. Furthermore, the video-game versions, music and sound effects (all practical related material) can be found in the digital appendix.

Esse artigo visa apresentar um glossário conceitual voltado à análise e ao design de identidade sonora em jogos digitais. Para isso, propõe uma reflexão sobre o conceito de “sound branding”, e o aplica, apropriando-se da ideia de “tétrade elementar” dos jogos. Em seguida, traça um panorama dos principais “estilos audiovisuais” no âmbito da sonoridade, relidos à luz do conceito de “remediação”. Finalmente, propõe uma terminologia que busca integrar o eixo estético da sonoridade ao eixo ludofuncional, partindo do conceito de “paleta sonora”.

This paper describes a framework to facilitate the authoring of sound with spatio-temporal relativity in virtual or augmented environments. It is based upon the premise that the interactor with the environment creates their own individual interpretation of 'narrative': as a result of their movement through the space, accumulating fragments of stimuli or content to create meaning. Inspiration is gained from the actions of the archaeologist, using stratigraphy as a recording practice, that records spacio-temporal paradigms. As the author of a spatialised soundscape composes a database of narrative fragments for the user to encounter, the paper proposes a distinct design process that reverses the excavation procedure, and re-imagines stratigraphical layers as phases of sound in the present tense.

This project was an investigation into the affects of an audio-based dynamic game balancing system on flow, contained in a specifically designed audio-only game. Comparisons were made between two versions of the game, one using the dynamic game balancing (DGB) system and one using a randomly controlled difficulty system. Dynamic game balancing can be used as a method of changing the difficulty of the game level to match the emotional state of the player (Tijs, Brokken & IJsselsteijn 2008). The study was undertaken to enhance the knowledge of audiogames, through introducing a new practical example of a dynamic game balancing system.
The game makes use of established auditory dimension and sonification research, which were integrated into an x/y axis to aid the player locate enemy battleships. The DGB system acknowledges the player’s mean average score after three practice levels, which then sets a new starting difficulty for the new level. After the level difficulty starting point has been established, the level timer is used to gradually decrease the level difficulty.
The game difficulty is controlled by dynamic balancing of the sonar volume and the ambient volume. An increase in difficulty will produce a higher starting volume for the ambient audio, and a lower starting volume for the sonar audio.

O presente artigo pretende apresentar um resumo da dissertação, e suas produções relacionadas (desenvolvimento de um jogo eletrônico e partitura musical), que busca discutir e exemplificar os processos composicionais aplicados no Audio Game Breu, jogo eletrônico do gênero suspense/terror, constituído exclusivamente de recursos sonoros. Dentre dezenas de jogos eletrônicos do formato Audio Game analisados, foi constatado que a maioria não utiliza o recurso narrativo e da composição musical, e sim somente locuções interfaciais e efeitos sonoros como forma de fornecer feedbacks ao jogador, impactando negativamente em sua experiência imersiva. No caso do Audio Game Breu, que possui uma narrativa densa e permite uma maior liberdade de exploração ao jogador em relação aos jogos do formato audio game pesquisados, foi necessária a criação e implementação de uma composição musical que fosse capaz de não apenas dialogar com a narrativa do jogo, mas também auxiliar na navegação e cumprimento de objetivos do jogador potencializando a imersão do mesmo durante a interação. Para isso, experimentei diferentes técnicas composicionais, além de abordar definições de jogo eletrônico, áudio dinâmico, inclusão e imersão, dentre outras. A pesquisa surgiu a partir da motivação de se produzir um audio game que não fosse voltado exclusivamente para o público deficiente visual e que houvesse uma maior exploração da narrativa e dos recursos sonoros, em especial da composição musical, geralmente não utilizada em jogos do formato. Tal exploração teve como intuito oferecer uma experiência interativa semelhante e sobretudo mais imersiva para jogadores videntes ou deficientes visuais, promovendo assim uma maior inclusão. Concluo a partir da observação de interações e relatos orais de jogadores de perfis diversos do Audio Game Breu, que a aplicação dos conceitos aqui apresentados na composição musical do jogo contribuíram de forma significativa na experiência imersiva do jogador, de modo que a música cumpriu funções diversas como inserir dinâmica e tensão na narrativa do jogo, além de trazer informações e feedbacks auditivos essenciais ao bom desempenho do jogador. Palavras-chave: composição musical; música para games; áudio para games; áudio dinâmico;

According to the World Health Organization (2019), an estimated 217 million people worldwide are visually impaired and 36 million are blind. Although there are approximately 114,000 video games currently in active circulation (MobyGames, 2020), just over 700 of these are accessible to the visually impaired (AudioGames.net, n.d.-a). This practice-oriented research project investigates the potential of audio games through the design and development of the Audio Game Hub and Blind Cricket. The games were created through iterative cycles of prototyping and public releases and stimulated and refined through the agency of voluntary user feedback. They were released on iOS and Android platforms and over a period of two years were downloaded over 130,000 times. They gathered insightful user reviews and won multiple nominations and awards. The project was presented at several conferences and featured on television and the Internet. The research was activated by a form of agency I define as an Indie Designer/Developer. Here, one is an integrated agent who develops work through critical reflection from online reviews, relying heavily on the implementation of tacit knowing (Polanyi, 1967; Schön, 1984). As a ‘generalist’, the Indie Designer/Developer combines the role of researcher, designer, reflective practitioner, developer, publisher and entrepreneur.

Os jogos digitais sao uma das principais linguagens da cultura digital. Como produto audiovisual, hipermidiatico e interdisciplinar, os jogos envolvem a integracao de diversos profissionais, em diferentes areas de atuacao. Uma de suas areas e o design de audio, que reune as producoes de musicas, efeitos sonoros e vozes na criacao de um universo sonoro para o jogo, em intima relacao com o universo ficcional, com a visualidade e com o game design. Embora o campo de estudos do audio para jogos ja reuna uma serie de trabalhos academicos na ultima decada, trata-se de um territorio ainda pouco desbravado, sobretudo no que diz respeito a integracao do audio com a criacao de uma identidade estetica e funcional ao jogo. Nesse sentido, essa tese tem o objetivo de propor um arcabouco conceitual que permita compreender a formacao de identidade sonora em jogos, particularmente pela integracao da sonoridade com uma “tetrade elementar” formada por estetica, mecânica, historia e tecnologia. Para ta...

Audio-only games represent an alternative type of gaming genres that continuously evolves following the technolog- ical trends that boost the video-games market. Since augmented reality is now a widespread approach for producing new kind of immersive applications, including games, it is expected that audio-only games will be influenced by this approach. This work represents the beginning of an attempt to investigate the process of delivering augmented audio-only games, focusing on specific technical factors that can improve the user interaction and the overall game-play experience. In particularly, it focuses on a new augmented reality audio mixing process that is optimized for variable acoustic environments, allowing the development of new attractive titles of audio-only games.