Academic literature on the topic 'Vibrotactile music'

The project has the purpose of designing and developing a wearable haptic device for experiencing music through tactile vibrations on the body, and the result is the product concept BEATHOVEN and a completely new way of experiencing music.  Music is powerful, it touches our soul and gives form to our emotions. It captures the inner landscape of our minds, resonating in endless colours and nuances and shares it with others. Music has been a part of the human species for over 40 000 years and has played a fundamental role in our evolution and society; it is believed that we sang before we even spoke. Music, along with its aesthetic qualities, has throughout history been closely tied to our auditory perception. It was originally created and designed for listeners and has long been considered as something for the hearing. That perspective is starting to get more and more blurred out, however, and music is stepping out of auditory exclusivity. The general view of music today excludes over five percent of the world's population: people with disabling hearing loss. Hearing loss can impact a person’s life in many ways and one major impact is their ability to communicate with others. Music is another form of communication, and it is one where all of these people have thus far been excluded. The goal of this project is to design and develop a product that includes more people in music.  The project is carried out in collaboration with Pariception, a company specialized in research and development of assistive devices for people with deafblindness, and stems from one of their existing products: Good Vibrations. Good Vibrations is a wearable device for experiencing music through vibrations; it is a completely unique product and differs from all other solutions on the market. There are some brands, such as SubPac and Woojer, who have developed tactile music accessories, but these products are focused on enhancing a listening experience. Good Vibrations and BEATHOVEN are unique because they aim to convey the full musical experience and to be used independently from hearing. The current project brings Good Vibrations back to its basic concept idea, to redefine, refine, and design it into a usable, viable, and desirable consumer product: BEATHOVEN.   The project is made up of three main parts; to understand how the vibrotactile experience of music can be designed into a meaningful product, to understand how music can be conveyed through vibrotactile sensations on the body, and to know where on the body the vibrations should be conveyed to optimize the experience. To do this, we have created our own approach, adopting a mix of different design approaches such as design-driven innovation, human-centered design, embodied design, and aesthetic exploration. Research strongly indicates that it is possible to perceive aesthetic qualities within music through other senses than hearing, for example through stimuli such as tactile vibrations. To aid us in the development of the product, and to explore the aesthetic qualities of vibrations, we have defined a new research subject called Vibraesthetics.  The project has resulted in BEATHOVEN, a product concept featuring five vibrotactile actuators distributed to the chest and the neck. The product takes the input from any song or piece of music and transposes its frequencies to fit within 5-1000 Hz, which is the general range of human tactile perception. The music is further divided into three registers and distributed to separate and dedicated actuators. Some of the artist's original intentions with the music may be altered, but the richness of the experience is still there and available to anyone, regardless of their hearing abilities.<br>Målet med projektet är att utveckla och designa en bärbar haptisk produkt för att uppleva musik genom taktila vibrationer på kroppen. Resultatet av projektet är produktkonceptet BEATHOVEN och ett helt nytt sätt att uppleva musik.  Musik är kraftfull, det berör vår själ och sätter form på våra känslor. Det fångar vårt inre landskap, resonerar i oändliga färger och nyanser och delar det med andra. Musik har varit en del av den mänskliga arten i över 40 000 år och har spelat en grundläggande roll i vår utveckling och i vårt samhälle; mycket tyder på att vi sjöng innan vi ens började prata. Musik, tillsammans med dess estetiska kvalitéer, har genom historien varit nära knuten till vår hörsel. Den skapades ursprungligen och designades för lyssnare och har länge ansetts vara något för just hörseln. Den här synen på musik börjar dock mer och mer suddas ut, och nya sätt att uppleva musiken får ta plats. Genom den allmänna synen på musik vi har i dag utesluts dock över fem procent av världens befolkning: personer med nedsatt hörsel. Hörselnedsättning kan påverka människors liv på flera sätt och en viktig inverkan är på förmågan att kommunicera med andra. Musik är en annan form av kommunikation, en form där alla dessa människor hittills har blivit exkluderade. Målet med detta projekt är att designa och utveckla en produkt som inkluderar fler personer i musik.  Projektet genomförs i samarbete med Pariception, ett företag specialiserat på forskning och utveckling av hjälpmedel för personer med dövblindhet, och grundar sig i en av deras befintliga produkter: Good Vibrations. Good Vibrations är en bärbar produkt som möjliggör upplevelsen av musik genom taktila vibrationer; det är en helt unik produkt i sig och skiljer sig från alla andra lösningar som finns på marknaden idag. Det finns ett fåtal aktörer, som SubPac och Woojer, som har utvecklat taktila musiktillbehör, men de är enbart inriktade på att förstärka upplevelsen för den som redan hör. Good Vibrations och BEATHOVEN är unika av sitt slag då de eftersträvar att förmedla den fulla musikupplevelsen, oberoende av hörseln. I det här projektet tar vi Good Vibrations tillbaka till sin kärna, för att sedan omdefiniera, förfina och utforma den till en användbar, fungerande och åtråvärd konsumentprodukt: BEATHOVEN.  Projektet består av tre huvuddelar; att förstå hur musikens vibrotaktila upplevelse kan designas till en meningsfull produkt, att förstå hur musik kan förmedlas genom vibrotaktila förnimmelser på kroppen, samt att veta var på kroppen vibrationerna ska förmedlas för att optimera upplevelsen. För att göra detta, har vi skapat ett eget tillvägagångssätt, där vi har kombinerat olika designmetoder så som; design-driven innovation, människocentrerad design, embodied design och estetisk utforskning. Forskning visar starkt på att det är möjligt att uppleva estetiska egenskaper inom musiken genom andra sinnen än hörseln, till exempel genom taktila vibrationer. För att hjälpa oss i utvecklingsarbetet av produkten och för att bättre undersöka och förstå vibrationernas estetiska egenskaper har vi definierat ett nytt forskningsämne som heter Vibroestetik.  Resultatet av projektet är BEATHOVEN, ett produktkoncept bestående av vibrotaktila aktuatorer fördelade på bröstet och nacken. Produkten översätter vilken låt eller musik som helst och transponerar ner den till ett område på 5-1000 Hz, vilket är det allmänna omfånget för vår huds taktila uppfattningsförmåga. Musiken är sedan uppdelad i tre register och distribueras till separata aktuatorer. En viss del av konstnärens ursprungliga tankar och idéer med musiken kan förändras eller filtreras bort, men upplevelsens rikedom finns fortfarande kvar och är tillgänglig för alla, oavsett deras hörsel.

The expressivity of musical performance is highly dependent on the feedback relationship between the performer and the instrument. Despite current advances in music technology, performers still struggle to retain the same expressive nuances of acoustic instruments. The capacity of performative musical expression in technologically-driven music is mitigated by the limitations of controllers and other sensor-based devices used in the performance of such music. Due to their physical properties, such devices and components are unable to provide mainly the haptic and vibrotactile experience between the instrument and the user, thus breaking the link with traditional musical performance. Such limitations are apparent to performers, suggesting often the existence of an unnatural barrier between the technology and the performer. The thesis proposes the use of vibrotactile feedback as means to enhance performer’s expressivity and creativity in technology mediated performances and situate vibrotactile feedback as part of the tradition of instrumental musical playing. Achieved through the use of small controllable electric motors, vibrotactile feedback can nourish communicative pathways between the performer and technology, a relationship that is otherwise limited or non-existing. The ability to experience an instrument's communicative response can significantly improve the performer-instrument relationship, and in turn the music performed. Through a series of case studies, compositions and performances, the dissertation suggests ways in which vibrotactile feedback may be applied to enhance the experience between the technology and the performer. As a result performers are able to develop expressive nuances and have better control of the technology during performance.

This study was conducted to assess physical and perceptual properties of a tactile display for a vibrotactile notification system within the CIRMMT Live Electronics Framework (CLEF), a Max-based modular environment for composition and performance of live electronic music. The tactile display was composed of two rotating eccentric mass actuators driven by a PWM signal generated from an Arduino microcontroller. Physical measurements using an accelerometer were carried out in order to estimate intensity and spectral peak frequency as function of duty cycle of the PWM signal. In addition, three user-based studies were conducted to estimate perceptual vibrotactile absolute threshold, differential threshold and temporal differential threshold. Obtained results provided us with precise guidelines that facilitate the design of perceptually robust vibrotactile stimuli for our tactile application. A set of eight simple tactons (vibrotactile icons) was defined, whereafter an absolute identification test was conducted in order to estimate mean tacton recognition rates. Results were promising; mean tacton recognition rate was found to be 74 %. Based on all findings described above, a Max-based prototype used for exploration of tactile stimuli was developed. The prototype contained a library of tactile notification presets to be loaded into CLEF, along with a simple tacton editor for design of customized tactile events.<br>Syftet med denna studie var att undersöka fysiska och perceptuella egenskaper hos en taktil display som designats för att presentera taktila notifikationssignaler till användare av CIRMMT Live Electronics Framework (CLEF), en Max-baserad modulär miljö för komposition och framförande av musikstycken som involverar Live Electronics. Live Electronics är ett begrepp som innefattar elektronik som används för att generera, processera eller modifiera ljud i realtid. Den taktila display som användes i denna studie var uppbyggd av två roterande excentriska massor, drivna av en pulsbreddsmodulerad signal som genereras av en Arduino mikrokontroller. Accelerometermätningar och tre användarbaserade studier genomfördes för att undersöka följande: intensitet och spektral toppfrekvens som funktion av pulskvot, sensorisk tröskel och intensitetsdiskriminering mellan presenterade stimuli, samt JND i millisekunder för två efterföljande taktila stimuli. Erhållna resultat analyserades varefter riktlinjer för design av perceptuellt robusta signaler för vår taktila display sattes upp. I slutfasen av studien designades åtta taktila signaler, varefter en användarbaserad studie genomfördes för att uppskatta hur lätta dessa signaler var att identifiera. En genomsnittlig identifikationsnivå på 74 % kunde noteras. Baserat på ovan beskrivna resultat utvecklades slutligen en taktil modulprototyp i form av ett bibliotek av fördefinierade taktila stimuli. Denna prototyp inkluderande även en funktion som gav användaren möjlighet att designa och skräddarsy egna taktila signaler.

Ce travail de recherche propose l’idée d’une musique électro-somesthésique (MES). Nous la définissons en tant qu'une musique informatique qui cible la somesthésie dans des perspectives artistiques et musicales. La MES engage les sens somatiques non-cochléaires sensibles aux ondes mécaniques. Nous proposons que l’expérience somesthésique de l’espace est qualitativement distincte des autres sens. Ces sensations opèrent en haute précision dans notre espace intime : à travers notre seuil corporel et voire à l’intérieur de nous-même. Ces subtilités offrent un terrain novateur artistique à explorer. Toutefois, les considérations spatiales potentielles sont complexes et peuvent prêter à confusion. Ainsi, pour mieux apprécier leurs relations et expérimenter des idées compositionnelles, nous avançons des considérations théoriques avec quelques preuves de concept techniques et artistiques. Dans la première partie, nous abordons l’espace conceptuel de l’expression spatiale MES : les relations spatiales parmi les niveaux du percepteur, du contenu et de l’environnement. Dans la seconde partie, nous élaborons les possibilités matricielles du rendu spatial en informatique : trois paradigmes principaux de la manipulation spatiale—la physique (par l’acoustique), le virtuel (par l’informatique), le perceptuel (par des illusions d’espace pas apparentes)—qui passent par deux optiques : où des événements sonores sont relatifs au niveau du corps (égocentrée) ou où ils sont relatifs à l’environnement externe au corps (allocentrée). Ensemble, ces cas théoriques constituent un espace créateur prometteur et les expérimentations pratiques explorent des chemins pour ses investigations futures<br>This work of research proposes the idea of electro-somaesthetic music (ESM). We define it as a computer music that targets somatosensation for artistic and musical ends. ESM engages the non-cochlear somatic senses sensitive to mechanical waves. We propose that the somatosensory experience of space is qualitatively distinct from other senses. These sensations operate at high resolution within our intimate space: across our bodily threshold and even within the interior space of our bodies. These subtleties offer a novel artistic terrain for exploration. However, its potential spatial considerations are complex, and these can lend themselves to confusion. As such, to better appreciate their relationships and experiment with compositional ideas, we advance some theoretical considerations with several technical and artistic proofs of concept. In the first part, we address the conceptual space of ESM spatial expression. We examine the relationships among the levels of the perceiver, the content, and the environment. In the second part, we elaborate upon the matrix of possibilities regarding computational spatial rendering: three principal paradigms of spatial manipulation—physical (via acoustics), virtual (via computation), perceptual (via non-evident spatial illusions)—that transpire through two lenses: where sonic events are relative to the level of the body (egocentric) or where they are relative to the environment external to the body (allocentric). Together, these theoretical cells form a promising creative space and our practical experimentations explore paths forward toward future investigations