Дисертації з теми "Audiovisual"

This dissertation takes an integrated approach to the study of audiovisual cues to verbal irony. While pragmatic studies have mainly focused on the role of the discourse context in irony detection, little is known about the role of prosodic and gestural cues in this process. The thesis includes four experimental studies—each one described in a separate chapter—addressing a set of questions using a variety of experimental designs. The first one is a case study of a professional comedian and reveals (a) that ironic utterances display a higher density of prosodic and gestural markers than non-ironic utterances; and (b) that gestural markers can appear both temporally aligned with prosodic prominence but can also appear independently, as gestural codas. The second study includes two experiments: (a) a production experiment eliciting spontaneous ironic speech which reveals that in non-professional spontaneous speech, too, speakers employ a higher density of prosodic and gestural markers in ironic compared to non-ironic utterances; and (b) a perception experiment on the contribution of gestural codas to the detection of verbal irony, which shows that speakers detect ironic intent significantly better when post-utterance gestural codas are present than when they are not. Following up on this idea, the third study presents three perception experiments on the relative contribution of contextual vs. prosodic vs. gestural cues to verbal irony understanding. Overall, results of the three experiments emphasize the role of contrast effects in irony perception. The first experiment shows that (a) listeners detect irony more accurately when they have access to both prosodic and gestural cues than when they just rely on prosodic information, (b) that listeners rely more strongly on gestural information than on prosodic information, and (c) that listeners rely more heavily on gestural cues than on prosodic or contextual ones for detecting irony. Finally, the fourth study addresses the contribution of prosodic and gestural cues to children’s early understanding of verbal irony, showing that mismatched multimodal cues of emotion facilitate the detection of irony by 5-year-old children. Altogether, this dissertation shows that both prosodic and gestural markers of irony aid in guiding the hearer in the interpretation of an utterance by providing overt clues about the assumptions, emotions and attitudes held by the speaker. Together with recent studies on the general pragmatic effects of prosody and gesture, the claim is that audiovisual markers of irony are strong triggers of implicature strength which help decode speech intentions in interaction. In addition, the dissertation presents novel empirical evidence of the stronger effects of multimodal—and especially gestural—cues in comparison with contextual cues, both in adult and child populations. This crucial finding leads us to claim that the study of prosodic and gestural cues to verbal irony should be at the core of any pragmatic or psycholinguistic account of verbal irony production and comprehension.
Esta tesis aborda el estudio de las marcas audiovisuales de la ironía verbal desde una perspectiva integral. Los estudios pragmáticos se han centrado principalmente en investigar el papel del contexto discursivo en la detección de la ironía, pero poco se sabe sobre el rol que desempeñan las marcas prosódicas y gestuales en este proceso. La presente tesis incluye cuatro estudios experimentales —cada uno de ellos incluido en un capítulo separado— que abordan diferentes preguntas de investigación utilizando varios diseños experimentales. El primero es un estudio de caso sobre un cómico profesional y muestra, en primer lugar, que los enunciados irónicos presentan una mayor densidad de marcadores prosódicos y gestuales que los enunciados no irónicos y, segundo, que los marcadores gestuales pueden aparecer alineados temporalmente con la prominencia prosódica, pero también de forma independiente, como codas gestuales. El segundo estudio incluye dos experimentos. Uno de producción —diseñado para obtener discurso irónico espontáneo—, cuyos resultados confirman que también en habla espontánea los hablantes no profesionales emplean una mayor densidad de marcadores prosódicos y gestuales cuando son irónicos en comparación con cuando no lo son; y, en segundo lugar, un experimento de percepción que investiga la contribución de las codas gestuales a la detección de la ironía verbal y cuyos resultados muestran claramente cómo la intención irónica se detecta significativamente mejor cuando los hablantes tienen acceso a codas gestuales que cuando no la tienen. El tercer estudio de esta tesis contiene tres experimentos de percepción que examinan cómo el contexto, las marcas prosódicas y las marcas gestuales contribuyen a la comprensión de la ironía verbal. En general, los resultados de los tres experimentos subrayan la importancia que los “efectos de contraste” tienen en el proceso de detección de la ironía. El primero muestra que los oyentes detectan la ironía con más precisión cuando tienen acceso a las marcas prosódicas y gestuales de manera conjunta que cuando solo tienen acceso a la información prosódica; el segundo, que la información visual resulta más convincente que la información prosódica a la hora de detectar la ironía; y, por último, el tercer experimento muestra que los oyentes emplean preferentemente las marcas gestuales por encima de las prosódicas e incluso de las contextuales a la hora de detectar la ironía. Finalmente, el cuarto estudio investiga cómo los niños desarrollan la capacidad de detectar la ironía verbal a través de las marcas prosódicas y gestuales, y los resultados muestran que las marcas multimodales facilitan la detección de la ironía en niños desde los 5 años de edad. En conjunto, esta tesis muestra que tanto los marcadores prosódicos como los gestuales contribuyen de manera significativa a la comprensión de la ironía verbal, guiando al oyente en la interpretación del enunciado mediante el suministro de pistas sobre las suposiciones, las emociones y las actitudes del ironizador. Siguiendo la línea de algunos estudios recientes sobre los efectos pragmáticos de la prosodia y el gesto, los resultados de los experimentos de esta tesis muestran que los marcadores audiovisuales de la ironía son potentes desencadenadores del proceso inferencial necesario para decodificar las intenciones del hablante en las interacciones comunicativas. Además, esta tesis presenta evidencia empírica de la gran incidencia que tienen las marcas multimodales —y especialmente de las gestuales— en la detección de la ironía verbal en comparación con las marcas contextuales, tanto en la población adulta como en la infantil. Este hallazgo fundamental nos lleva a afirmar que el estudio de las señales prosódicas y gestuales de la ironía debería considerarse una parte integral fundamental de cualquier explicación pragmática o psicolingüística sobre la producción y comprensión de la ironía verbal.
Aquesta tesi adopta una perspectiva integral a l'estudi de les marques audiovisuals en la ironia verbal. Els estudis pragmàtics s'han centrat principalment a investigar el paper del context discursiu en la detecció de la ironia, però se sap poc sobre el rol que juguen les marques prosòdiques i gestuals en aquest procés. La tesi inclou quatre estudis experimentals —cadascun d’ells descrit en un capítol separat— que aborden diferents preguntes de recerca i fan servir diversos dissenys experimentals. El primer és un estudi de cas sobre que analitza el discurs d’un còmic professional i mostra, en primer lloc, que els enunciats irònics presenten una major densitat de marcadors prosòdics i gestuals que els enunciats no irònics; i, en segon lloc, que els marcadors gestuals poden aparèixer temporalment alineats amb la prominència prosòdica, però també de forma independent, en el que anomenem “codes gestuals”. El segon estudi inclou dos experiments. Un de producció, dissenyat per obtenir discurs irònic espontani i els resultats del qual confirmen que en parla espontània els parlants no professionals també empren una major densitat de marcadors prosòdics i gestuals quan són irònics en comparació a quan no ho són; i, en segon lloc, un experiment de percepció sobre la contribució de les codes gestuals a la detecció de la ironia verbal, els resultats del qual demostren que la ironia es detecta millor quan els parlants tenen accés a codes gestuals que quan no en tenen. El tercer estudi presenta tres experiments de percepció que examinen com el context, les marques prosòdiques i les marques gestuals contribueixen a la comprensió de la ironia verbal. En general, els resultats dels tres experiments subratllen la importància dels efectes de contrast en el procés de detecció de la ironia. El primer experiment mostra que els oients detecten la ironia amb més precisió quan tenen accés a les marques prosòdiques i gestuals alhora, comparat amb quan només tenen accés a la informació prosòdica; el segon, que la informació visual és més poderosa que la informació prosòdica a l’hora de detectar la ironia, i, finalment, el tercer experiment mostra que els oients empren preferentment les marques gestuals per sobre de les prosòdiques o les contextuals a l’hora de detectar la ironia. Finalment, el quart estudi investiga com els infants aprenen a comprendre la ironia verbal a través de les marques prosòdiques i gestuals, i els resultats mostren que les marques multimodals faciliten la detecció de la ironia des dels 5 anys d'edat. En conjunt, aquesta tesi mostra que tant els marcadors prosòdics com els gestuals contribueixen a la comprensió de la ironia verbal, tot guiant l'oient en la interpretació de l’enunciat mitjançant el subministrament de pistes sobre els supòsits, les emocions i les actituds del parlant irònic. Seguint la línia d’estudis recents sobre els efectes pragmàtics de la prosòdia i el gest, els resultats dels experiments d’aquesta tesi mostren que els marcadors audiovisuals de la ironia són potents factors que desencadenen el procés inferencial necessari per a descodificar les intencions del parlant en les interaccions comunicatives. A més, aquesta tesi presenta evidència empírica de la gran incidència que tenen les marques multimodals —i especialment de les gestuals— en la detecció de la ironia verbal, en comparació amb les marques contextuals, tant en població adulta com en població infantil. Aquesta troballa fonamental reforça la idea que l'estudi dels aspectes prosòdics i gestuals hauria de ser una part integral fonamental de qualsevol explicació pragmàtica o psicolingüística sobre la producció i comprensió de la ironia verbal.

The doctoral programme has supported my transformation from a sometimes experimental, sometimes commercial animation director to an artist working with animation. That is to say, it has helped me question the origins of my hitherto largely intuitive approach by framing it within a wider artistic-theoretical context. This has enabled me to reposition and revaluate my moving image practice, and brought me to a point where I have focus in terms of concept, technique, methodology and professional practice. This report is divided into sections. ‘Autobiographical Context’ outlines relevant personal history, education and practice prior to the doctorate programme. ‘Creative Practice and Theory’ forms the main body of my reflective, contextual and critical analysis of my practice throughout the five years of the doctorate. Through a discussion of artists and theorists I investigate several interconnected areas of importance to my work: the interface between abstraction and figurative spaces; the use of animation and abstraction in an expanded sense including live performance; and the relationships between sound, music and image. An examination of the development of my artistic practice will contextualise it within this framework. ‘Professional Practice’ provides an account of exhibitions, performances and other professional engagements, and some further reflective thoughts on how this has integrated into my doctoral research. The conclusion collates my overall final position.

Evento organizado en la Semana de la Traducción Audiovisual y de la Investigación, realizado del 23 al 25 de abril de 2018, campus Monterrico. Lima, Perú.
Conferencia que aborda los nuevos aspectos del perfil del traductor audiovisual.

This thesis investigates the role of cross-modal correspondence within audiovisual composition, presenting both a conceptual model and a methodological framework for the creation of abstract audiovisual art. While this research is specifically aimed at the field of abstract digital animation it is also intended to act as a platform for the future development of concurrent audiovisual synthesis techniques within the general field of audiovisual art. Referencing literature regarding the psychophysiological bases for audiovisual integration, it is argued that temporal congruence offers a mechanism for the manipulation of cross-modal correspondence within audiovisual media. Further to this, electroacoustic and formalist theory is discussed with specific reference to the interrelationship of medium structures to enable the identification of a conceptual model for audiovisual composition. Referencing theory from the fields of musical instrument design and algorithmic composition, parameter mapping is identified as a mechanism for the modulation of temporal congruence. Its implementation within audiovisual composition is then discussed. Derived from both this and a conceptual parallel between the organisational structures of audio grains and visual particles, the audiovisual particles framework is presented as a methodological basis for the creation of abstract audiovisual art. The presented theory is supported by a series of demonstrative studies exploring both the practical application of the audiovisual particles framework and the role of parameter mapping within the process of audiovisual media generation. Experiential observations are discussed for each to inform future praxis. In addition, two audiovisual compositions are presented as both implementations of developed theory and as artworks in their own right.

The objective of this thesis is to detect high level semantic ideas to help to impose a structure on television talk shows. Indexing TV-shows is a subject that, to our knowledge, is rarely talked about in the scientific community.There is no common understanding of what this imposed structure should look like. We can say that the purpose is to organise the audiovisual content into sections that convey a specific information. It thus encompasses issues as diverse as scene segmentation, speech noise detection, speaker identification, etc. The basic problem of structuring is the gap between the information extracted from visual data flow and human interpretation made by the user of these data. Numerous studies have examined the organisation of highly structured video content. Thus, the state of the art has many studies on sport or newscast transmissions. Our goal is to detect key audiovisual events using a variety of descriptors and generic classifiers. We propose a generic approach that is able to assess all TV-show indexing problems. This enables an operator to use one single tool to infer a logical structure. Our approach can be considered as ``semi-automatic'' in the sense that the training data is collected on the fly by the operator who is asked to arbitrarily select one video excerpt of each concept involved. We have assessed a wide selection of audio and video features, used MKL as a feature selection algorithm and then built various content detectors and segmentors useful for imposing broad semantic classes on television data.This master's thesis was set forth by TELECOM ParisTech and was begun there March 1, 2010. This final report was submitted to TELECOM ParisTech, NTNU and Institute EURECOM August 29, 2010.

Submitted by Silvana Teresinha Dornelles Studzinski (sstudzinski) on 2015-05-04T19:06:44Z No. of bitstreams: 1 Cybeli Moraes.pdf: 2408428 bytes, checksum: 989a2e7d9b1bbaebaaba9e7868eb4332 (MD5)
Made available in DSpace on 2015-05-04T19:06:44Z (GMT). No. of bitstreams: 1 Cybeli Moraes.pdf: 2408428 bytes, checksum: 989a2e7d9b1bbaebaaba9e7868eb4332 (MD5) Previous issue date: 2012-04-04
CAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível Superior
A presente tese aborda a invenção do conceito de pausa audiovisual – pausa AV –, partindo das percepções e dos afetos sobre um corpus de 80 materiais que abrangem produções televisivas, videográficas, cinemáticas, fotográficas e internéticas. Utilizando os aportes teórico-metodológicos de Silva e Rossini, Bergson, Deleuze, Guattari, Derrida, Benjamin e Kilpp, entre outros, o corpus foi produzido cartograficamente, tendo em vista as audiovisualidades e sua processualidade rizomática; foi problematizado a partir do método intuitivo; foi de sconstruído e agrupado em constelações; e, por fim, dissecado em moldurações, molduras e emolduramentos para dar a ver os sentidos ofertados. Tal arquitetura possibilitou a seguinte conclusão: a pausa AV é um misto que, como tal, possui uma tendência atualizada em ralentis, inscrições fotográficas e fragmentos longos, e outra, virtual: a espera. Essa constituição a diferencia como ethicidade do mundo audiovisual contemporâneo, que oferta sentidos a partir de suas figuras sonoras, dos intervalos, das diamorfoses e das suspensões e, possivelmente, agencia esperas no observador – comoexpectativa ou antecipação –, respondendo a desejos e a crenças do homem atual acerca de seu mundo e de sua existência. A delimitação do conceito de pausa AV contribui para a compreensão da cena audiovisual contemporânea, plena de outras ethicidades como o tempo e o acontecimento audiovisuais, dadas a ver também pelos agencimentos da pausa AV.
The present thesis presents the invention of the concept of audiovisual pause - AV pause - starting on perceptions and afections about a corpusof 80 materials, including television, videographic, cinematic, phothographic and internetic productions. Using the theoretical and methodological approaches of Silva and Rossini, Bergson, Deleuze, Guattari, Derrida, Benjamin, and Kilpp, among others, the corpuswas cartographically produced in view of the audiovisualities and your rhizomatic processivity; problematized with the intuitive method; deconstructed and grouped into constellations; and dissected on moldurações, molduras e emolduramentos to become visible the offering of meanings.Such architecture allowed the following conclusion: the AV pause is a mixture that, as such as, has a tendency toupdates itself in ralentis, photographic inscriptions and long fragments, and another, virtual, the wait. This caracterization differentiates it like an ethicidade of the audiovisual world, that offers meanings starting onsounding figures, intervals, diamorfoses, suspencions, and possibly makes waits agencies on the observer - as expectation or anticipation - in response to desires and beliefs of modern man about their world and existence. The delimitation of the concept of AV pause, we believe, contributes to the understanding of contemporary audiovisual scene, full of other ethicidadesas audiovisual time and event, too became visible by the agencies of AV pause.

Este trabajo servirá como piedra angular para encaminar el diseño gráfico en el área de la investigación e integrarlo con otras disciplinas, al utilizarlo como medio de entretenimiento y educación y algo mucho más importante, puede ayudarnos a incluir a nuestro modo de vida a las personas con debilidad visual y auditiva, y ayudarnos a notros a entender mejor la relación entre color y sonido, entendiendo mejor el proceso perceptual a través de la esta SINESTESIA ARTIFICIAL. Ahora que se tiene esta referencia, no quiere decir que sea el único camino para asociar color y sonido, puede que en un futuro la tecnología nos ayude y nos proporcione las herramientas necesaria para lograr entender mejor nuestra manera de percibir el mundo donde vivimos y tal vez sea este un puente para llegar a ese objetivo mucho más rápido. Este proyecto abre más puertas en el campo de la investigación, si sabemos ahora que podemos representar el sonido a través de un color y que la música tiene ciertas cualidades como el tiempo y escalas por mencionar algunas, saltan las siguientes preguntas: ¿Podría crearse un software especializado en la interpretación, conversión, edición y conversión del sonido en imagen y viceversa? De ser así ¿a cuanto equivaldría en en segundos, viéndolo desde la perspectiva digital; 1 cm2 de determinado color a 300 ppp? ¿Qué pasaría si pudiéramos ver una composición de música clásica o reinterpretar una pintura famosa? Al integrar esta investigación dentro de la sociedad ¿Qué impacto tendría el poder acercar a las personas la posibilidad de experimentar la sinestesia? Y se se pudo crear esta sinestesia fono cromática, ¿podrá crearse otra de diferente tipo, podremos entonces oler, saborear o tocar los colores?
Este proyecto tiene como objetivo crear una referencia entre color y notas musicales a través de las propiedades físicas de la luz y el sonido para finalmente aplicarlo en proyectos audiovisuales de diseño. Utilizando teoría del color y de la música, e investigación en física para los orígenes de ambos, algunas referencias biológicas, físicas y psíquicas, se ha creado una tabla que permite visualizar los colores, a manera guía, con alrededor de 100 resultados que tienen su origen en 12 colores diferentes que nos da el espectro de luz visible y en las 12 notas musicales dentro del espectro audible musical. Empleando como instrumento base las octavas de un piano y el sistema de color RGB para su síntesis. La relación del color y el sonido en esta tabla es el resultado de varias operaciones matemáticas, donde la frecuencia del sonido es convertida a longitud de onda para así obtener un resultado en nanómetros que serán interpretados después en datos informáticos que se verán reflejados en color. Este documento por ningún motivo pretende ser la única referencia en esta relación, a lo largo de los años muchos científicos y artistas han aportado información sobre este tema, la información que aquí se maneja es un punto de vista personal que pretende facilitar la realización en el diseño gráfico audiovisual. La gran mayoría de las personas no prestamos demasiada atención a los hechos que nos rodean, damos por sentadas algunas de las cosas que se encuentran a nuestro alrededor y no le damos importancia al proceso de percepción.

The ʻaudiovisual objectʼ is a fusion of sound object and visual object to create an identifiable perceptual phenomenon, which can be treated as a ʻbuilding blockʼ in the creation of audiovisual work based primarily on electroacoustic composition practice and techniques. This thesis explores how the audiovisual object can be defined and identified in existing works, and offers an examination of how it can be used as a compositional tool. The historical development of the form and the effect of the performance venue on audience immersion is also explored. The audiovisual object concept builds upon theories of electroacoustic composition and film sound design. The audiovisual object is defined in relation to existing concepts of the sound object and visual object, while synaesthesia and cross-modal perception are examined to show how the relationship between sound and vision in the audiovisual object can be strengthened. Electroacoustic composition and animation both developed through technological advances, either the manipulation of recorded sounds, or the manipulation of drawn/photographed objects. The key stages in development of techniques and theories in both disciplines are examined and compared against each other, highlighting correlations and contrasts. The physical space where the audiovisual composition is performed also has a bearing on how the work is perceived and received. Current standard performance spaces include acousmatic concert systems, which emphasize the audio aspect over the visual, and the cinema, which focuses on the visual. Spaces which afford a much higher level of envelopment in the work include hemispheric projection, while individual experience through virtual reality systems could become a key platform. The key elements of the audiovisual object, interaction between objects and their successful use in audiovisual compositions are also investigated in a series of case studies. Specific audiovisual works are examined to highlight techniques to create successful audiovisual objects and interactions. As this research degree is in creative practice, a portfolio of 4 composed works is also included, with production notes explaining the inspiration behind and symbolism within each work, along with the practical techniques employed in their creation. The basis for each work is a short electroacoustic composition which has then been developed with abstract 3D CGI animation into an audiovisual composition, demonstrating the development of my own practice as well as exploring the concept of the audiovisual object. The concept of the audiovisual object draws together existing theories concerning the sound object, visual perception, and phenomenology. The concept, the associated investigation of how audiovisual compositions have evolved over time, and the analysis and critique of case studies based on this central concept contribute both theory and creative practice principles to this form of artistic creativity. This thesis forms a basis for approaching the creative process both as a creator and critic, and opens up a research pathway for further investigation.

This thesis attempts to open a dialogue around fundamental questions of perception such as: how do we represent our ongoing auditory or visual perception of the world using our brain; what could these representations explain and not explain; and how can these representations eventually be modeled by computers? Rather than answer these questions scientifically, we will attempt to develop a computational arts practice presenting these questions to participants. The approach this thesis takes is computational scene synthesis: a computationally generative collage process where the units of the collage are built using perceptually-inspired representations. We explain how scene synthesis is built in detail and relate it to an existing lineage of collage-based practitioners. Then, working in auditory and visual domains separately, in order to bring questions of perception to the experience of the artwork, this thesis makes significant interdisciplinary strides from reviewing fundamental issues in perception in terms of experimental psychology and cognitive neuroscience, to formulating and developing perceptually-inspired computational models of large databases of audiovisual material, to finally developing these models with a computationally generative collage-based arts practice. Two final practical outputs using audiovisual scene synthesis will be explored: (1) a short film series which attempts to recreate the number 1 video of the week on YouTube using only the audiovisual content from the remaining top 10 videos; and (2) a real-time augmented reality experience presented through a virtual reality headset and headphones presenting a scene synthesis of a participant's surroundings using only previously learned audiovisual fragments. Results from both outputs demonstrate the ability for scene synthesis to provoke meaningful engagements with one's own process of perception. The results further demonstrate that scene synthesis is capable of highlighting both theoretical and practical gaps in our current understanding of human perception and their computational implementations.

La importancia de la profesión del traductor audiovisual y la escasez bibliográfica sobre este tema, especialmente en Rumanía, nos han llevado a realizar este análisis que aportará datos concretos y fiables sobre la traducción audiovisual y el perfil del traductor de textos audiovisuales en este país. Obras como las de Díaz Cintas (2003), Díaz Cintas y Remael (2007) o Chaume (2004, 2012), que describen los procesos de subtitulación y doblaje y que incorporan información sobre el perfil del traductor audiovisual en España, constituyeron una importante fuente de información utilizada a lo largo de nuestro estudio y nos permitieron cotejar los datos recabados en este. Además, los amplios estudios sobre las competencias específicas y genéricas que reúnen los traductores, como Kelly (2002, 2005), PACTE (2003) o Cerezo Merchán (2012) nos ayudaron a diseñar y formular la parte de esta tesis centrada en las destrezas y habilidades necesarias para el profesional de la traducción audiovisual.
The importance of the profession of the audiovisual translator and the bibliographical shortage on this subject, especially in Romania, they have led us to carry out this analysis, which will provide concrete and reliable data on audiovisual translation and the profile of the translator of audiovisual texts in this country. Works such as those of Díaz Cintas (2003), Díaz Cintas and Remael (2007) or Chaume (2004, 2012), which describe the subtitling and dubbing processes and which incorporate information on the profile of the audiovisual translator in Spain, constituted an important source information that used throughout in our study and allowed us to compare the data collected in this. In addition, the extensive studies on the specific and generic competences that translators gather, such as Kelly (2002, 2005), PACTE (2003) or Cerezo Merchán (2012) helped us to design and formulate the part of this thesis focused on the skills and necessary skills for the audiovisual translation professional.

This thesis proposes a novel system for audiovisual composition called AudioVisual Collage. It consists of a screen-based interactive system, which contains a series of algorithms responsible for automating the tasks of image segmentation, inpainting, virtual camera motion, 3D lighting, visual transitions and visual motion generated from data extracted from audio files. With the merging of theory and practice, this research project investigates new possibilities, new approaches, and alternative examples of what can be explored in the field of computational art so as to offer a computational framework embodying a set of conceptual principles for digital fine arts practice. The set of algorithms that constitute the AudioVisual Collage framework embody a collection of digital design techniques and artistic concepts created through an iterative, collaborative process with other artists, in which I acted as the sole computational practitioner. The two collaborative projects presented in this thesis, Surround Sounds and Interactive Art Gallery, are part of an on-going creation of case studies, which have allowed me to better understand a series of approaches and methods, leading to the design of a framework to successfully communicate and apply specific creative ideas. AudioVisual Collage is a framework that allows other artists and designers to create their own audiovisual aesthetic experiences, generating rich media outcomes constructed by software in real-time. That is, the system incorporates approaches from traditional media, such as sound recording and cinema, in order to generate new computational media based on a set of clear design principles. It also proposes an art vocabulary for audiovisual composition in the digital domain, which aims to deliver something unique in terms of the inherent potential of digital work that is not possessed by other media. AudioVisual Collage demonstrates an approach for manipulating the temporal structure and spatial organisation of visual elements so as to reflect their content, and also, a method for combining visual artworks and sound in the creation of algorithmic screen-based aesthetic experiences. Equally important, it is in itself a statement of what could be possibly developed in terms of algorithms for audiovisual composition in the filed of computational art.

Submitted by Bruna Bueno (bcabueno@gmail.com) on 2017-09-13T16:07:52Z No. of bitstreams: 1 Dissertação-Mestrado-Versão-final - PDF com áureo.pdf: 5820155 bytes, checksum: ba0098fe9656ac801be8eb59716f8ae4 (MD5)
Approved for entry into archive by Diego Andrade (diego.andrade@fgv.br) on 2017-10-02T13:46:51Z (GMT) No. of bitstreams: 1 Dissertação-Mestrado-Versão-final - PDF com áureo.pdf: 5820155 bytes, checksum: ba0098fe9656ac801be8eb59716f8ae4 (MD5)
Made available in DSpace on 2017-10-16T12:39:29Z (GMT). No. of bitstreams: 1 Dissertação-Mestrado-Versão-final - PDF com áureo.pdf: 5820155 bytes, checksum: ba0098fe9656ac801be8eb59716f8ae4 (MD5) Previous issue date: 2017-04-04
This research aims to study the broadcasting of the audiovisual heritage of television through the internet, based on the case study of the National Institute of Audiovisual (INA), seeking the contributions that the actions of management of the French audiovisual heritage can give professionals of audiovisual collections Brazilians. It analyzes how the access network works and the incentive to use the INA collection over the Internet in order to provide greater democratization of information and knowledge production, highlighting online curatorship focused on the educational function of heritage and the valua-tion of archives.
Cette recherche vise à étudier la propagation du patrimoine audiovisuel de la télévision par Internet, à partir de l'étude de l'Institut national de l'audiovisuel (INA), à la recherche des contributions que les mesures de gestion du patrimoine audiovisuel français peuvent donner aux professionnelles de las collections audiovisuelles brésiliens. Analyse comment le réseau d'accès et d'encourager l'utilisation de la collection INA sur Internet afin de fournir une plus grande démocratisation de l'information et de la production de connaissances, en soulignant la curation en ligne axé sur la fonction éducative des actifs et la récupération de fichiers.
Esta pesquisa se destina a estudar a difusão do patrimônio audiovisual de televisão pela internet, a partir do estudo de caso do Instituto Nacional do Audiovisual (INA), buscando as contribuições que as ações de gestão do patrimônio audiovisual francês podem dar aos profissionais de acervos audiovisuais brasileiros. Analisa como funciona a rede de acesso e o incentivo ao uso do acervo do INA pela internet de modo a proporcionar maior democratização da informação e produção de conhecimento, destacando a curadoria online voltada à função educativa do patrimônio e a valorização dos arquivos.

Es presenta un esquema únic per a la síntesi i anàlisi audiovisual personalitzable realista de seqüències audiovisuals de cares parlants i seqüències visuals de llengua de signes en àmbit domèstic. En el primer cas, amb animació totalment sincronitzada a través d'una font de text o veu; en el segon, utilitzant la tècnica de lletrejar paraules mitjançant la ma. Les seves possibilitats de personalització faciliten la creació de seqüències audiovisuals per part d'usuaris no experts. Les aplicacions possibles d'aquest esquema de síntesis comprenen des de la creació de personatges virtuals realistes per interacció natural o vídeo jocs fins vídeo conferència des de molt baix ample de banda i telefonia visual per a les persones amb problemes d'oïda, passant per oferir ajuda a la pronunciació i la comunicació a aquest mateix col·lectiu. El sistema permet processar seqüències llargues amb un consum de recursos molt reduït, sobre tot, en el referent a l'emmagatzematge, gràcies al desenvolupament d'un nou procediment de càlcul incremental per a la descomposició en valors singulars amb actualització de la informació mitja. Aquest procediment es complementa amb altres tres: el decremental, el de partició i el de composició.
Se presenta un esquema único para la síntesis y análisis audiovisual personalizable realista de secuencias audiovisuales de caras parlantes y secuencias visuales de lengua de signos en entorno doméstico. En el primer caso, con animación totalmente sincronizada a través de una fuente de texto o voz; en el segundo, utilizando la técnica de deletreo de palabras mediante la mano. Sus posibilidades de personalización facilitan la creación de secuencias audiovisuales por parte de usuarios no expertos. Las aplicaciones posibles de este esquema de síntesis comprenden desde la creación de personajes virtuales realistas para interacción natural o vídeo juegos hasta vídeo conferencia de muy bajo ancho de banda y telefonía visual para las personas con problemas de oído, pasando por ofrecer ayuda en la pronunciación y la comunicación a este mismo colectivo. El sistema permite procesar secuencias largas con un consumo de recursos muy reducido gracias al desarrollo de un nuevo procedimiento de cálculo incremental para la descomposición en valores singulares con actualización de la información media.
A shared framework for realistic and personalizable audiovisual synthesis and analysis of audiovisual sequences of talking heads and visual sequences of sign language is presented in a domestic environment. The former has full synchronized animation using a text or auditory source of information; the latter consists in finger spelling. Their personalization capabilities ease the creation of audiovisual sequences by non expert users. The applications range from realistic virtual avatars for natural interaction or videogames to low bandwidth videoconference and visual telephony for the hard of hearing, including help to speech therapists. Long sequences can be processed with reduced resources, specially storing ones. This is allowed thanks to the proposed scheme for the incremental singular value decomposition with mean preservation. This scheme is complemented with another three: the decremental, the split and the composed ones.

This thesis looks at how sound and visuals may be linked in a musical instrument, with a view to creating such an instrument. Though it appears to be an area of significant interest, at the time of writing there is very little existing - written, or theoretical - research available in this domain. Therefore, based on Michel Chion’s notion of synchresis in film, the concept of a fused, inseparable audiovisual material is presented. The thesis then looks at how such a material may be created and manipulated in a performance situation. A software environment named Heilan was developed in order to provide a base for experimenting with different approaches to the creation of audiovisual instruments. The software and a number of experimental instruments are discussed prior to a discussion and evaluation of the final ‘Ashitaka’ instrument. This instrument represents the culmination of the work carried out for this thesis, and is intended as a first step in identifying the issues and complications involved in the creation of such an instrument.

Este trabalho é um estudo sobre a montagem audiovisual. A pesquisa se estrutura em torno das relações entre os elementos fundamentais do ofício de se montar imagens e sons: o tempo, o espaço, a montagem, as ferramentas de trabalho, media pipelines e o mapa. Para tanto, investigamos a natureza algorítmica e tecnológica da montagem audiovisual, as formas de sua aplicação na produção industrial e também as possibilidades de criação formas singulares de montagem que se originam a partir da exploração de fissuras (cracks) decorrentes das características algorítmicas da montagem audiovisual. Esta pesquisa também abrange a análise de um conjunto de produtos televisivos seriados, dos filmes Zidane: A 21st Century Portrait, Azul é a Cor Mais Quente, Blue, entre outros.
This research is a study on audiovisual montage. Time, space, montage, tools, media pipelines and maps are the key elements of the craft of editing sound and images and this research is structured around these fundamentals. The algorithmic nature of montage and its use in industrial media production and the possibility of creating unique montage styles that explores the cracks in this algorithm are investigated in this thesis. This research also analyses a set of television series, the feature films Zidane: A 21st Century Portrait, Blues is the Warmest Color, Blue, among others.

A presente pesquisa é uma reflexão sobre a relação entre o fazer artístico e sua investigação teórica. Como ponto de partida, buscamos compreender o termo intermídia por meio dos modos operatórios que engendram os relacionamentos entre os meios de expressão artística. Qual a natureza da relação intermidiática? Como esta se realiza operacionalmente? Quais os operadores que induzem tal relação, e como estão presentes, como se relacionam, como delimitam, ou não, uma relação intermidiática? Como ponto de chegada, a aposta de que as noções de convergência audiovisual e de dispositivo nos permitem pensar os trânsitos operatórios entre os meios visuais e sonoros em uma prática artística específica. Esta, por sua vez, é caracterizada pelas dinâmicas das ações de um grupo de artistas em um ambiente coletivo e colaborativo de criação, do qual emerge um contexto de influências mútuas e intensificadas entre as ações dos artistas e entre imagem e som. No que concerne as noções de convergência audiovisual e dispositivo, a primeira diz respeito a uma busca por uma vetorização comum, tento em vista uma mesma situação visual e sonora, na qual encontramos um elo entre imagem e som; a segunda, a uma rede de conexões entre meios, materiais e práticas artísticas. Para a realização deste estudo, estabelecemos como estratégias de ação a experimentação artística, a análise de obras e a pesquisa bibliográfica. A escolha do campo problemático abordado e dos nossos objetivos são atravessados pela experimentação artística, de modo que prática e teoria estão continuamente em relação. Sob este prisma, caminhamos do particular ao geral, ou seja, a partir da análise de obras e da experimentação podemos tanto apreender alguns conceitos e ideias presentes na investigação teórica, quanto extrair algumas conclusões. Pretendemos assim responder às exigências da área de Poéticas Visuais, que privilegia pesquisas tanto teóricas quanto experimentais sobre os processos artísticos.
This research is a reflection on the relationship between artistic practice and its theoretical research. As a starting point, we seek to understand the term intermedia through operational methods that engender relationships between means of artistic expression. What is the nature of intermedia relation? How this is done operationally? Which are the operators who induces such relationship and how they are present, how they relate, how they delimit, or not, an intermedia relation? As a point of arrival, the assumption that the notions of audiovisual convergence and of device allow us to think the operative movement between the visual and audio means in a specific artistic practice. This in turn, is characterized by the dynamics of the actions of a group of artists in a collective and collaborative environment of creation, from which emerges a context of mutual and intensified influences between the artists action and between image and sound. Regarding the concepts of audiovisual convergence and device, the first is about the search for a common vectorization, having in mind the same visual and sound situation in which we find a link between image and sound; the second, a network of connections between material and artistic practices. For this study, we established as strategies of action an artistic experimentation, an analysis of the artworks and a bibliographic research. The choice of the addressed problematic field and our goals are crossed by artistic experimentation, so that theory and practice are continuously in relation. From that perspective, we went from the particular to the general, that is, from the analysis of the artworks and experimentation we can both learn some concepts and ideas in the theoretical research, as to draw some conclusions. We intend to meet the needs of the area of Visual Poetics, which emphasizes both theoretical and experimental research on the artistic processes.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución (cine TV Web-Multimedia dispositivos portátiles etc.) y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución (cine TV Web-Multimedia dispositivos portátiles etc.) y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución (cine TV Web-Multimedia dispositivos portátiles etc.) y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución (cine TV Web-Multimedia dispositivos portátiles etc.) y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución (cine TV Web-Multimedia dispositivos portátiles etc.) y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución y que implican aproximaciones estéticas y hábitos de consumo específicos.

El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución y que implican aproximaciones estéticas y hábitos de consumo específicos.

Lenguaje Audiovisual es un curso de tercer nivel de la Carrera de Comunicación Audiovisual y Medios Interactivos de caracter teórico que se adscribe a la línea curricular de lenguaje audiovisual y de la construcción de un relato audiovisual desarrollando ademas las competencias generales de comunicación escrita.El lenguaje oral y escrito son medios de comunicación tanto como de creación. Nos permiten expresar ideas contar historias y transmitir emociones a través de palabras que articuladas de acuerdo a un conjunto de reglas se convierten en mensajes. La creación audiovisual no es ajena a esta dinámica. Cuenta con un lenguaje y una gramática propios que se basan en la articulación de imagen y sonido para expresar su mensaje a través de formatos diversos.Este curso brinda una introducción a los conceptos fundamentales del lenguaje audiovisual los elementos que lo conforman y sus funciones narrativas y expresivas. Además analiza las particularidades de la aplicación de esta gramática en los diferentes soportes audio-visuales que están en constante evolución y que implican aproximaciones estéticas y hábitos de consumo específicos.

Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo que busca desarrollar la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato.El lenguaje es tanto un medio de comunicación como uno de creación; de expresar ideas contar historias y transmitir emociones. El lenguaje audiovisual sigue la misma dinámica pero reemplazando las palabras por imágenes sonidos música segmentos de realidad imaginada que conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.

Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo que busca desarrollar la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato.El lenguaje es tanto un medio de comunicación como uno de creación; de expresar ideas contar historias y transmitir emociones. El lenguaje audiovisual sigue la misma dinámica pero reemplazando las palabras por imágenes sonidos música segmentos de realidad imaginada que conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.

Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo que busca desarrollar la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato.El lenguaje es tanto un medio de comunicación como uno de creación; de expresar ideas contar historias y transmitir emociones. El lenguaje audiovisual sigue la misma dinámica pero reemplazando las palabras por imágenes sonidos música segmentos de realidad imaginada que conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.

Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo que busca desarrollar la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato.El lenguaje es tanto un medio de comunicación como uno de creación; de expresar ideas contar historias y transmitir emociones. El lenguaje audiovisual sigue la misma dinámica pero reemplazando las palabras por imágenes sonidos música segmentos de realidad imaginada que conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.

Descripción:El lenguaje audiovisual es tanto un medio de comunicación como uno de creación donde las imágenes sonidos música segmentos de realidad imaginada conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes eficaces y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.Propósito:Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo. El curso desarrolla la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato Audiovisual.

Descripción:El lenguaje audiovisual es tanto un medio de comunicación como uno de creación donde las imágenes sonidos música segmentos de realidad imaginada conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes eficaces y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.Propósito:Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo. El curso desarrolla la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato Audiovisual.

Descripción:El lenguaje audiovisual es tanto un medio de comunicación como uno de creación donde las imágenes sonidos música segmentos de realidad imaginada conforman un medio fascinante donde las historias cobran vida. En este curso aprenderás las reglas y adquirirás las herramientas necesarias para contar historias audiovisuales coherentes eficaces y entretenidas. En un mundo sediento por entretenimiento y estímulos estarás preparado para hacer que tus historias resalten y así ganarte un lugar en la historia del cine.Propósito:Lenguaje Audiovisual es un curso de especialidad de la Carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico-práctico dirigido a estudiantes del cuarto ciclo. El curso desarrolla la competencia general de comunicación escrita y las competencias específicas de Lenguaje Audiovisual y Construye un Relato Audiovisual.

Proyecto Audiovisual es un curso de especialidad en la carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico - práctico dirigido a los estudiantes de décimo ciclo busca desarrollar las competencias generales de Comunicación Escrita Comunicación Oral Razonamiento Cuantitativo y Pensamiento Innovador y las competencias específicas Técnica y Tecnología Construye un Relato Audiovisual y Negocios y Empresas Audiovisuales.En este curso producirás un cortometraje de ficción con un alto nivel de exigencia en planteamiento desarrollo del trabajo en equipo y resultados en calidad técnica y expresiva. Este trabajo te permitirá adquirir solvencia para acometer las tareas definidas por los perfiles profesionales de salida de cara a tu inmediata incorporación al mundo laboral.

Postproducción Audiovisual es un curso de especialidad en la carrera de Comunicación Audiovisual y Medios Interactivos de carácter práctico dirigido a los estudiantes del séptimo ciclo y busca desarrollar la competencia general de Pensamiento Innovador y la competencia específica de Técnica y Tecnología.Vivimos en un mundo en el que el avance de la tecnología hace posible que contemos en casa con herramientas que hasta hace unos años eran exclusividad de grandes estudios y casas realizadoras. Hoy desde cualquier computadora podemos acceder a un sin fin de herramientas las cuales harán de nuestro trabajo audiovisual piezas de alta calidad y muy fino acabado capaces de competir con los estándares internacionales.En el curso de Post-producción; aprenderás el manejo básico de éstas herramientas; además de desarrollar una visión crítica y analítica que no solo te permita resolver problemas; sino que también proponer soluciones creativas a priori. Es decir que al finalizar el curso utilizarás las distintas técnicas de postproducción formularás plantearás y fundamentarás sus usos creativos más allá de un simple facilitador de soluciones crearás. Así mismo recuerda que: te vayas a dedicar a la post-producción o no saber de su uso y abuso te dará una clara y evidente ventaja competitiva respecto a cualquier realizador que no las conozca dado que busca desarrollar el manejo de herramientas para la postproducción de todo tipo de material audiovisual. Así como la visión crítica y analítica para saber discernir que herramienta utilizar según las necesidades del proyecto.

Curso de especialidad en la carrera de Comunicación Audiovisual y Medios Interactivos de carácter práctico dirigido a los estudiantes del 7mo ciclo que busca desarrollar las competencias de manejo de herramientas para la post-producción de todo tipo de material audiovisual. Así como la visión crítica y analítica para saber discernir que herramienta utilizar según las necesidades del proyecto.Vivimos en un mundo en el que el avance de la tecnología hace posible que contemos en casa con herramientas que hasta hace unos años eran exclusividad de grandes estudios y casas realizadoras. Hoy desde cualquier computadora podemos acceder a un sin fin de herramientas las cuales harán de nuestro trabajo audiovisual piezas de alta calidad y muy fino acabado capaces de competir con los estándares internacionales.En el curso de Post-producción; aprenderás el manejo básico de éstas herramientas; además de desarrollar una visión crítica y analítica que no solo te permita resolver problemas; sino que también proponer soluciones creativas a priori. Es decir que al finalizar el curso utilizarás las distintas técnicas de postproducción formularás plantearás y fundamentarás sus usos creativos más allá de un simple facilitador de soluciones crearás. Así mismo recuerda que: te vayas a dedicar a la post-producción o no saber de su uso y abuso te dará una clara y evidente ventaja competitiva respecto a cualquier realizador que no las conozca.

Curso de especialidad en la carrera de Comunicación Audiovisual y Medios Interactivos de carácter práctico dirigido a los estudiantes del 7mo ciclo que busca desarrollar las competencias de manejo de herramientas para la post-producción de todo tipo de material audiovisual. Así como la visión crítica y analítica para saber discernir que herramienta utilizar según las necesidades del proyecto.Vivimos en un mundo en el que el avance de la tecnología hace posible que contemos en casa con herramientas que hasta hace unos años eran exclusividad de grandes estudios y casas realizadoras. Hoy desde cualquier computadora podemos acceder a un sin fin de herramientas las cuales harán de nuestro trabajo audiovisual piezas de alta calidad y muy fino acabado capaces de competir con los estándares internacionales.En el curso de Post-producción; aprenderás el manejo básico de éstas herramientas; además de desarrollar una visión crítica y analítica que no solo te permita resolver problemas; sino que también proponer soluciones creativas a priori. Es decir que al finalizar el curso utilizarás las distintas técnicas de postproducción formularás plantearás y fundamentarás sus usos creativos más allá de un simple facilitador de soluciones crearás. Así mismo recuerda que: te vayas a dedicar a la post-producción o no saber de su uso y abuso te dará una clara y evidente ventaja competitiva respecto a cualquier realizador que no las conozca.

Descripción:El curso de Postproducción Audiovisual responde a la necesidad de conocer el manejo de técnicas y herramientas de post-producción que se nos plantea en la etapa final de todo proceso de realización de una obra audiovisual. Semanalmente abordaremos una técnica distinta acompañado de un ejercicio práctico que deberás resolver para adquirir el conocimiento necesario de cómo proceder frente a este proceso final.Propósito:Se trata de un curso introductorio de la carrera de Comunicación Audiovisual y Medios Interactivos de carácter práctico (técnico-artístico) dirigido a los estudiantes de séptimo ciclo que busca desarrollar las competencias generales Pensamiento innovador (nivel 3) y las competencias específicas Técnica y tecnología (nivel 3) y Construcción de un relato audiovisual (nivel 3).

Descripción:El curso de Postproducción Audiovisual responde a la necesidad de conocer el manejo de técnicas y herramientas de post-producción que se nos plantea en la etapa final de todo proceso de realización de una obra audiovisual. Semanalmente abordaremos una técnica distinta acompañado de un ejercicio práctico que deberás resolver para adquirir el conocimiento necesario de cómo proceder frente a este proceso final.Propósito:Se trata de un curso introductorio de la carrera de Comunicación Audiovisual y Medios Interactivos de carácter práctico (técnico-artístico) dirigido a los estudiantes de séptimo ciclo que busca desarrollar las competencias generales Pensamiento innovador (nivel 3) y las competencias específicas Técnica y tecnología (nivel 3) y Construcción de un relato audiovisual (nivel 3).

Descripción:El curso de Postproducción Audiovisual responde a la necesidad de conocer el manejo de técnicas y herramientas de post-producción que se nos plantea en la etapa final de todo proceso de realización de una obra audiovisual. Semanalmente abordaremos una técnica distinta acompañado de un ejercicio práctico que deberás resolver para adquirir el conocimiento necesario de cómo proceder frente a este proceso final.Propósito:Se trata de un curso introductorio de la carrera de Comunicación Audiovisual y Medios Interactivos de carácter práctico (técnico-artístico) dirigido a los estudiantes de séptimo ciclo que busca desarrollar las competencias generales Pensamiento innovador (nivel 3) y las competencias específicas Técnica y tecnología (nivel 3) y Construcción de un relato audiovisual (nivel 3).

Proyecto Audiovisual es un curso de especialidad en la carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico - práctico dirigido a los estudiantes de décimo ciclo busca desarrollar las competencias generales de Comunicación Escrita Comunicación Oral Razonamiento Cuantitativo y Pensamiento Innovador y las competencias específicas Técnica y Tecnología Construye un Relato Audiovisual y Negocios y Empresas Audiovisuales.En este curso producirás un cortometraje de ficción con un alto nivel de exigencia en planteamiento desarrollo del trabajo en equipo y resultados en calidad técnica y expresiva. Este trabajo te permitirá adquirir solvencia para acometer las tareas definidas por los perfiles profesionales de salida de cara a tu inmediata incorporación al mundo laboral.

Proyecto Audiovisual es un curso de especialidad en la carrera de Comunicación Audiovisual y Medios Interactivos de carácter teórico - práctico dirigido a los estudiantes de décimo ciclo busca desarrollar las competencias generales de Comunicación Escrita Comunicación Oral Razonamiento Cuantitativo y Pensamiento Innovador y las competencias específicas Técnica y Tecnología Construye un Relato Audiovisual y Negocios y Empresas Audiovisuales.En este curso producirás un cortometraje de ficción con un alto nivel de exigencia en planteamiento desarrollo del trabajo en equipo y resultados en calidad técnica y expresiva. Este trabajo te permitirá adquirir solvencia para acometer las tareas definidas por los perfiles profesionales de salida de cara a tu inmediata incorporación al mundo laboral.

Submitted by Cláudia Bueno (claudiamoura18@gmail.com) on 2016-05-18T20:41:10Z No. of bitstreams: 2 Tese - Lara Lima Satler - 2016.pdf: 2653914 bytes, checksum: a99d84ff6b544a5f13eb3f495146bbb4 (MD5) license_rdf: 23148 bytes, checksum: 9da0b6dfac957114c6a7714714b86306 (MD5)
Approved for entry into archive by Luciana Ferreira (lucgeral@gmail.com) on 2016-05-19T13:35:31Z (GMT) No. of bitstreams: 2 Tese - Lara Lima Satler - 2016.pdf: 2653914 bytes, checksum: a99d84ff6b544a5f13eb3f495146bbb4 (MD5) license_rdf: 23148 bytes, checksum: 9da0b6dfac957114c6a7714714b86306 (MD5)
Made available in DSpace on 2016-05-19T13:35:31Z (GMT). No. of bitstreams: 2 Tese - Lara Lima Satler - 2016.pdf: 2653914 bytes, checksum: a99d84ff6b544a5f13eb3f495146bbb4 (MD5) license_rdf: 23148 bytes, checksum: 9da0b6dfac957114c6a7714714b86306 (MD5) Previous issue date: 2016-03-07
Fundação de Amparo à Pesquisa do Estado de Goiás - FAPEG
The present research analyses a web of relationships involving my teaching practice on audiovisual in higher education, the students’ learning in this context and some experiments at movie sets of Sistema CooperAÇÃO – Amigos do Cinema and at workshops of Correspondências, the later a multimedia project by Garapa. Thereby, this inquiry is oriented by the question: how join ethical and cultural knowlegdes with technical and professional practices in my teaching action on audiovisual field? The research aimed to articulate ethics and cultural knowlegdes with technical and professional practices in my teaching action with movies, considering the scenario which involves higher education where I act. And, it specifically aimed: to reflect on my teaching action with movies, searching theories and methods to understand this activity, concerning its scope and limits; to develop a process of research-action on my teaching contexts by means of cyclical investigating, acting and thinking in collaboration with the students; and finally, to quest audiovisual know-how at Sistema CooperAÇÃO and Garapa in order to articulate it with my teaching practice. In this sense, this research has become formative firstly for myself because as a teacherresearcher I think about my teaching activity, reflecting on a series of inquietudes I lived in my path. However, it has also become formative for the students and Pezinho de Jatobá Project participants with whom I developed the first part of the field research, which happened in two NL’s disciplines (“free nucleus”) at Universidade Federal de Goiás. The second part of the field was at movie sets of Sistema CooperAÇÃO and at workshops of Garapa, which are groups that study and make movies simultaneously and with which, at that time, I sought answers to articulate knowledge and practice. In connection with that, my method instruments were research-action, classes diaries, direct observation, interviews and the analysis of audiovisual work produced by Sistema CooperAÇÃO and Garapa. As a result, I observe that my teaching practice is marked by gender questions and, consequently, it leads me to think over audiovisual formation on higher education and to discuss how articulate a cooperative ethics with the students’ routine, in order to encourage knowledge derived from lived experience, perception and from the experimentation of languages, formats and production of audiovisual meanings.
Cette étude propose d’explorer les relations entre mes activités pour l’enseignement de film et vidéo à l'Université, l' apprentissage des élèves dans ce contexte et certaines expérimentations dans ce domaine ont été réalisés par Sistema CooperAÇÃO – Amigos do Cinema et par Garapa. Ainsi, cette recherche est orientée par la question: comment articuler la connaissance éthique et culturel avec des actions techniques et professionnelles dans mes activités d'enseignement dans le domaine de l'audiovisuel? Mon objectif global est vérifier les articulations entre la connaissance éthique et culturel et les faits techniques et professionnelles dans mes activités pour enseigner film et vidéo à l'Université. Et mes objectifs spécifiques sont: réfléchir sur mes activités d'enseignement avec l'audiovisuel, la recherche de contributions théoriques et méthodologiques pour comprendre mon enseignement métier, leur portée et les limites; élaborer un processus de recherche-action dans ma classe d’agir et réfléchir de manière cyclique en collaboration avec les sujets impliqués; rechercher la connaissance et les pratiques de l'audiovisuel en collaboration avec le Sistema CooperAÇÃO – Amigos do Cinema et Garapa. Cette recherche est devenue formatrice première pour moi parce que, comme une enseignantechercheuse je pense à mes activités d'enseignement, une réflexion sur un certain nombre de préoccupations que je vécus dans ma carrière. Mais elle est encore formatrice pour les élèves et publique dans le projet d'extension Pezinho de Jatobá, qui sont les champs de cette recherche. Le Sistema CooperAÇÃO et le Garapa sont encore champs de recherche parce qu’ils sont des groupes qui étudient et font cinéma à la fois. Ainsi, j’ai développé une recherche-action comme méthologie et observations, interviews, l’écriture d’une mémoire jour après jour et j’ai observé les films des groups. Par conséquent, j’ai observé que mes activités pour enseigner film et vidéo à l'Université sont caractérisées par des expériences entre les sexes et ils m’ont demandé de penser cette formation avec l’articulation entre l’éthique de la coopération et le quotidien des éléves. J’ai découvert que cette manière d’étudier peut stimuler l’expérience vécue, la perception e l’expérimentation avec vídeos e leurs significations.
Nestas tramas formativas estão entrelaçadas a minha ação docente em audiovisual no ensino superior, as aprendizagens estudantis neste contexto e algumas experimentações ocorridas nos sets de filmagem do Sistema CooperAÇÃO – Amigos do Cinema e nas oficinas do projeto multimídia Correspondências, promovido pela Garapa. Desse modo, esta investigação é orientada pela questão sobre como articular saberes éticos e culturais com fazeres técnicos e profissionais na minha ação docente no campo do audiovisual. Objetivo, com essa discussão, em termos gerais, experimentar articulações entre saberes éticos e culturais com os fazeres profissionais na minha ação docente em audiovisual, considerando o cenário que envolve o ensino superior em que atuo. E, em termos específicos, proponho: refletir sobre minha ação docente com audiovisual, buscando aportes teórico-metodológicos para compreender meu ofício de professora, seus alcances e limites; desenvolver um processo de pesquisa-ação no meu contexto de atuação, investigando, agindo e refletindo ciclicamente em colaboração com os sujeitos envolvidos; e, por fim, buscar saberes e fazeres audiovisuais em colaboração com o Sistema Cooperação – Amigos do Cinema e Garapa a fim de articulá-los na minha ação docente. Nesses termos, essa investigação tornou-se formativa em primeiro lugar para mim, pois como professora-pesquisadora penso o meu fazer docente, refletindo sobre uma série de inquietações que vivenciei em meu percurso. Mas se propôs formativa também para aqueles/as estudantes e públicos do projeto de extensão Pezinho de Jatobá que aceitaram participar desta pesquisa comigo, cujo campo foi formado por duas disciplinas de Núcleo Livre (NL) na Universidade Federal de Goiás: Saberes Audiovisuais Colaborativos que ocorreu em parceria com o projeto de extensão Pezinho de Jatobá, em 2012/1 e Audiovisual Cotidiano, em 2012/2. No Sistema CooperAÇÃO – Amigos do Cinema e na Garapa, grupos que se propõem a estudar o audiovisual enquanto o realizam, busquei respostas para articulações entre saberes e fazeres ainda sem respostas para a minha ação docente na época. Assim, realizo essa investigação por meio de uma pesquisa-ação desenvolvida nos dois NLs que contou com diários de aula como instrumentos metodológicos e ainda observação direta, entrevistas, diários de campo e análise das obras audiovisuais realizadas pelo Sistema CooperAÇÃO e pela Garapa. Com essa investigação observo que a minha ação docente é marcada por vivências de gênero que me inquietam a pensar a formação audiovisual no ensino superior, articulando uma ética da cooperação ao cotidiano dos/as estudantes de modo a estimular saberes advindos da experiência vivida, da percepção e da experimentação de linguagens, formatos e produção de sentidos audiovisuais.

Cette thèse porte sur l’intégration de deux concepts : l’Analyse de Scènes Auditives (ASA) et la fusion audiovisuelle (AV) en perception de parole. Nous introduisons "l’Analyse de Scènes de Parole Audio Visuelles" (AVSSA) comme une extension du modèle à deux étages caractéristique de l’ASA vers des scènes audiovisuelles et nous proposons qu'un indice de cohérence entre modalités auditive et visuelle est calculé avant la fusion AV, ce qui permet de déterminer si les entrées sensorielles doivent être cognitivement liées : c’est le « modèle à deux étages » de la fusion AV. Des expériences antérieures sur la modulation de l'effet McGurk par des contextes AV cohérents vs. incohérents présentés avant la cible McGurk ont permis de valider le modèle à deux étages. Dans ce travail de thèse, nous étudions le processus AVSSA au sein de l'architecture à deux étages dans différentes dimensions telles que l'introduction de bruit, le mélange de sources AV, la recherche de corrélats neurophysiologiques et l’évaluation sur différentes populations.Une première série d'expériences chez les jeunes adultes a permis la caractérisation du mécanisme de liage AV en introduisant du bruit et les résultats ont montré que les participants étaient en mesure d'évaluer à la fois le niveau de bruit acoustique et la cohérence AV et de contrôler la fusion AV en conséquence. Dans une deuxième série d'expériences comportementales impliquant une compétition entre sources AV, nous avons montré que l’AVSSA permet d'évaluer la cohérence entre caractéristiques visuelles et auditives dans une scène complexe, afin d'associer les composants adéquats d'une source de parole AV donné, et de fournir pour le processus de fusion une évaluation de la cohérence de la source AV extraite. Il apparaît également que la fusion dépend du focus attentionnel sur une source ou l'autre. Puis une expérience EEG a cherché à mettre en évidence un marqueur neurophysiologique du processus de liage-déliage et a montré qu’un contexte AV incohérent peut moduler l'effet de l'entrée visuelle sur la composante N1 / P2. Une dernière série d'expériences a été axée sur l’évaluation du liage AV et de sa dynamique dans une population âgée, et a fourni des résultats similaires à ceux des adultes plus jeunes mais avec une plus grande dynamique de déliage. L'ensemble des résultats a permis de mieux caractériser le processus AVSSA et a été intégré dans la proposition d'une architecture neurocognitive améliorée pour la fusion AV dans la perception de la parole
The present doctoral work is focused on a tentative fusion between two separate concepts: Auditory Scene Analysis (ASA) and Audiovisual (AV) fusion in speech perception. We introduce “Audio Visual Speech Scene Analysis” (AVSSA) as an extension of the two-stage ASA model to- wards AV scenes, and we propose that a coherence index between the auditory and the visual input is computed prior to AV fusion, enabling to determine whether the sensory inputs should be bound together. This is the “two-stage model of AV fusion”. Previous experiments on the modulation of the McGurk effect by AV coherent vs. incoherent contexts presented before the McGurk target have provided experimental evidence supporting the two-stage model. In this doctoral work, we further evaluate the AVSSA process within the two-stage architecture in various dimensions such as introducing noise, considering multiple sources, assessing neurophysiological correlates and testing in different populations.A first set of experiments in younger adults was focused on behavioral characterization of the AV binding process by introducing noise and results showed that the participants were able to evaluate both the level of acoustic noise and AV coherence and to monitor the AV fusion accordingly. In a second set of behavioral experiments involving competing AV sources, we showed that the AVSSA process enables to evaluate the coherence between auditory and visual features within a complex scene, in order to properly associate the adequate components of a given AV speech source, and provide to the fusion process an assessment of the AV coherence of the extracted source. It also appears that the modulation of fusion depends on the attentional focus on one source or the other.Then an EEG experiment aimed to display a neurophysiological marker of the binding and un- binding process and showed that an incoherent AV context could modulate the effect of the visual input on the N1/P2 component. The last set of experiments were focused on measurement of AV binding and its dynamics in the older population, and provided similar results as in younger adults though with a higher amount of unbinding. The whole set of results enabled better characterize the AVSSA process and were embedded in the proposal of an improved neurocognitive architecture for AV fusion in speech perception

Submitted by Mariana Dornelles Vargas (marianadv) on 2015-03-20T19:47:22Z No. of bitstreams: 1 glifos_durantes.pdf: 3876414 bytes, checksum: 6b15583570b6640fe5ebfd53a1666bc7 (MD5)
Made available in DSpace on 2015-03-20T19:47:22Z (GMT). No. of bitstreams: 1 glifos_durantes.pdf: 3876414 bytes, checksum: 6b15583570b6640fe5ebfd53a1666bc7 (MD5) Previous issue date: 2012-03-28
Nenhuma
O presente estudo propõe-se a formular o conceito de glifos durantes na superfície audiovisual e avaliar o impacto da intervenção de elementos estáticos impressos sobre a imagem movente a partir do conceito de duração de Henri Bergson e de linha e superfície de Vilém Flusser. Valendo-se dos avanços provenientes do estudo das audiovisualidades na comunicação, é investigada, em diferentes experimentos audiovisuais, a duração agenciada por estes glifos. A pesquisa elege o móvel como lugar de investigação, tomando como princípios metodológicos a intuição, as cartografias, a desconstrução e as molduras, o que resulta em um procedimento de scanning, que intercala flaneuria e dissecação. No processo de invenção metodológica e aproximação do objeto, realiza-se uma pesquisa exploratória que flana através de experimentos pré-cinematográficos (Alegoria da Caverna, Fenaquitoscópio, Tavoletta di Bruneleschi) e de produtos audiovisuais (Anèmic Cinema, , Dans le Noir du Temps, O Livro de Cabeceira, Pierrot Le Fou, Pulp Fiction, The Life and Death of 9413). A abordagem metodológica propõe um procedimento, inspirado no movimento espiral experimentado pelo espectador quando colocado em contato com os glifos, que leva em conta as idas e vindas entre afecções e percepções, entre objetividade e subjetividade e entre atuais e virtuais. Por fim, procede-se com um estudo de caso, aplicando a metodologia do movimento espiral ao filme Dogville. Com isso, deseja-se contribuir com o estudo das audiovisualidades, propondo uma alternativa de operação metodológica que procura dar conta da complexidade dos objetos abordados por este campo.
This study aims to formulate the concept of during glyphs over the audiovisual surface and evaluate the impact of the intervention of static elements printed on the moving image, learning with the Henri Bergson ́s concept of duration and Vilém Flusser's concept of line and surface. Taking advantage of advances made by the study of audiovisualities, the research investigates the duration brokered by the glyphs over different audiovisual experiments. The research has choosen the movement as a place of research, taking as methodological principles intuition, cartography, deconstruction and the frames method, resulting in a scanning procedure, which merges flanêurie and dissection. In the process of methodological approach and invention of the subject, carried out an exploratory study that flyes through audiovisual experiences (The Allegory of the Cave, Fenaquitoscope, Tavoletta di Bruneleschi) and movies (Anèmic Cinèma, Dans le Noir du Temps, The Pillow Book, Pierrot Le Fou, Pulp Fiction, The Life and De ath of 9413). The methodological approach proposes a procedure inspired by the spiral motion experienced by the viewer when placed in contact with the glyphs, which takes into account the movement between affections and perceptions, between objectivity and subjectivity and between actual and virtual. Finally, proceed with a case study, applyi ng the methodology of the spiral motion to the Dogville movie. With it, this research aims to contribute to the study of audiovisualidades, proposing an alternative methodology that attempts to handle the complexity of the objects studied by this field.

Thesis (S.M.)--Massachusetts Institute of Technology, Program in Media Arts & Sciences, 2000.
Includes bibliographical references (p. 145-149).
This thesis presents a new computer interface metaphor for the real-time and simultaneous performance of dynamic imagery and sound. This metaphor is based on the idea of an inexhaustible, infinitely variable, time-based, audiovisual "substance" which can be gesturally created, deposited, manipulated and deleted in a free-form, non-diagrammatic image space. The interface metaphor is exemplified by five interactive audiovisual synthesis systems whose visual and aural dimensions are deeply plastic, commensurately malleable, and tightly connected by perceptually- motivated mappings. The principles, patterns and challenges which structured the design of these five software systems are extracted and discussed, after which the expressive capacities of the five systems are compared and evaluated.
Golan Levin.
S.M.

Audiovisual concatenative synthesis is an analysis-driven granular technique using a corpus of multimedia data to sequence audio and video streams on a microtemporal level. This text outlines my development of this technique as a tool for multimedia composition, using my work, Replica, as a case study. The paper illustrates how the concepts of granular structure, gesture capture, and replication are integral not only to the software but to the architecture of the composition. In doing so, machine learning approaches to music and visual art are reviewed and related to my personal compositional practice. Additionally, I attempt to show how audiovisual concatenative synthesis provides a composer with strategies for shaping one's sense of time through disorienting audiovisual cues and tightly organized counterpoint between sound and image, stage and screen, and the real and virtual.