Актуальность исследования. Современное общество в своем развитии шагнуло на новую ступень сохранения впечатлений и знаний об окружающем мире на основе компьютерных технологий. Распространение сетей ЭВМ, широкомасштабное использование мультимедийных технологий раскрыли для дизайнеров новую уникальную возможность применения профессиональных навыков в области мультимедиа. Мультимедийные технологии активно используются в подготовке учебных, научных, коммерческих изданий. В связи с этим специалисты различных областей знания, а тем более, чьей профессиональной деятельностью является дизайн, получили возможность разрабатывать логично структурированные, понятные электронные информационные документы на высоком эстетическом уровне.

Для дизайнера важным является тот факт, что компьютерные технологии позволяют использовать в мультимедийном издании изображения, выполняющие разные функции. При этом существенно, что в композицию мультимедиа можно включать звуковое сопровождение. В мультимедийном издании используется синтез разных выразительных - визуальных и звуковых - средств. Для дизайнера открылась возможность применения профессиональных навыков в решении новой задачи - осуществлении визуально-звукового синтеза. Основным остается следующее требование к результату: в мультимедийном издании должна создаваться такая виртуальная среда, в которой человеку комфортно, которая отвечает его представлению о правильно организованном информационном пространстве.

Важная составляющая восприятия окружающего связана со способностью видения и отражена в традиции визуальных искусств. Зрительные образы влияют на оценку информации на сознательном и подсознательном уровнях. Изображение как способ получения и передачи информации, появившееся раньше письменности, было и остается наиболее эффективным во всей истории человечества. В то же время, в культуре есть тонко разработанная система звуковых средств, способная передать представления человека об устройстве мироздания. Поэтому при разработке информационных мультимедийных изданий уместно ставить и решать задачи синтеза визуально-звуковых средств. Звуковая и визуальная информация, помещаемая в мультимедийное пространство, не может оставаться простым эквивалентом исходного содержания: появляется эффект добавленного содержания от формы. Роль и значение мультимедиа заключается в способности к социокультурной коммуникации средствами современного электронного транслирования культурного наследия.

Степень теоретической разработанности проблемы. Для выявления специфических особенностей объекта проектирования - мультимедийного издания - были изучены труды, посвященные мультимедиа, среди которых работы следующих авторов: О.А. Шлыкова, Н.С. Анисимова, Н.И. Дворко, А.И. Каптерев, Бент Б. Андерсен. Во всех работах отмечается, что в процессе разработки мультимедийного издания, наряду с другими, уместно и необходимо ставить задачи создания синтеза визуально-звуковых средств, для раскрытия многогранности содержания. В работах одних авторов, например Н.И. Дворко, даны общие рекомендации их решения: виды взаимодействия звука и изображения, время выбор звукового сопровождения в процессе проектирования. В работах других авторов задача создания единства визуально-звукового образа мультимедийного издания обозначается, но не раскрывается.

Цель исследования определила направление поиска информации и потребовала обращения к следующим научным дисциплинам: культурологи, музыковедению, киноведению, психологии.

В процессе разработки эскизов, поиска соответствий визуального и музыкального решений задача состоит не только в том, чтобы опираться на спонтанно возникающие ассоциации, но и в умении использовать знания особенностей создания соответствующего образа средствами музыки.

На основе изученных материалов по истории и теории изобразительных искусств (Г. Вельфлина, С.М. Даниэля, Д. В. Сарабьянова, В.Н. Прокофьева, Л.В. Мочалова, А.К. Якимовича, В.А. Филиппова) и музыки (Б.В. Асафьев, С.С. Скребков, Т.Н. Ливанова, С. Яроциньский, Т.В. Чередниченко, Т.Б. Баранова, Ю.И. Михайлова) были выявлены общие черты эволюции выразительных средств двух искусств - живописи и музыки. Исследовались работы, посвященные взаимодействию и взаимовлиянию визуальных искусств и музыки следующих авторов: В.В. Кандинского, М.С. Кагана, А.Я. Зись, В.В. Ванслова, В.А. Крючковой, С.Т. Махлиной, В.В. Визер. В исследованиях российских ученых Б.М. Галеева и И.Л. Ванечкиной отмечается, что впервые цветосветовая и звуковая композиции соединились в единое целое в «Прометее» А.Н. Скрябина. В диссертации использовались материалы, посвященные творчеству П. Клее - известного музыканта и художника, преподавателя Баухауза. Результаты его экспериментов в области графики были изучены и применены при разработке научно-методологической основы проектирования визуально-звуковой композиции мультимедийного издания средствами современных технологий.

Рассмотрен пример создания визуально-звукового синтеза в творчестве композитора и архитектора середины ХХ века - Я. Ксенакиса. В начале XXI века разработана теория аудиовизуальных стимулов «Светозвуковой музыкальный строй» В.В. Афанасьева. Автор приводит психофизические обоснования взаимосвязи звука и цвета и находит соотношения степеней цветовых напряженностей, соответствующих напряженностям звуковых отношений.

Рассматривалась проблема создания визуально-звукового синтеза в искусстве кино в трудах Р. Арнхейма, С.М. Эйзенштейна, С.И. Фрейлиха, В.Н. Ждана, С.И. Юткевича, В.М. Лензона. Изобразительное, цветовое, шумовое, музыкальное, речевое развитие композиции в кинопроизведении приобретает полифонический характер. Метод, которым в кинопроизведении с последовательно раскрывающимся сюжетом можно достичь звукозрительного единства и соответствия, разработал С.М. Эйзенштейн. Известны аналогии С.М. Эйзенштейна между музыкальным и цветовым решением, работой с актерами и монтажом. Музыка по специфике своих выразительных средств более других компонентов предрасположена нести в себе отпечаток целого. А. Шнитке отмечал, что в основе совершенно разных жизненных явлений лежит какая-то одна и та же формула, одна и та же модель, которая воспроизводится нерациональным путем.

В процессе работы над музыкальными кинофильмами, наметилась тенденция построения монтажа по принципу музыкальной драматургии. При этом в мультипликации такая практика существует уже давно. Все это говорит о том, что дизайнерам, занимающимся в области проектирования мультимедийных изданий, необходимо овладевать знаниями из области музыки. Найти свои методы создания визуально-звукового синтеза.

Методы создания визуально-звукового синтеза, разработанные в искусстве кино, нельзя напрямую заимствовать в проектировании мультимедийных изданий. Исследованные материалы подтверждают необходимость разработки метода по созданию синтеза визуально-звуковой композиции современного мультимедийного издания. Для этого необходимо иметь общую систему понятий и ясно сформулированные единые принципы анализа композиции произведений изобразительного искусства и музыки.

В диссертации автор обращался к работам, посвященным психологии восприятия искусства в области музыки (Г.В. Иванченко, М.С. Старчеус, Т.А. Стахи, В.Н. Поликарпов) и в области визуальных искусств (Р. Арнхейм, В.И. Иванов, Л.И. Клименко, Э.С. Злотина). Система условных обозначений (схемы), предложенных в процессе разработки методики проектирования визуально-звукового синтеза, основана на нормах и стереотипах структурирования, соответствующих определенному историческому стилю; на инвариантах восприятия, представляющих собой единство неизменного и меняющегося, общего и особенного, которые известны из области психологии восприятия искусства.

Цель исследования: Разработка научно-методологической основы проектирования визуально-звуковой композиции в дизайне на примере мультимедийных изданий.

Задачи:

1. Поиск метода анализа произведений искусства, позволяющий устанавливать соответствие визуального и музыкального композиционного решения в дизайне.

2. Определение смыслового соответствия терминологии для проведения сравнительного анализа произведений изобразительного искусства и музыки.

3. Поиск методов проектирования визуально-звуковой композиции.

4. Выявление принципов использования научно-методологической основы проектирования в процессе обучения студентов-дизайнеров.

Объект исследования - визуально-звуковой синтез в дизайне.

Предмет исследования - композиционные принципы создания визуально-звукового синтеза в дизайне мультимедиа изданий.

Границы исследования: Привлекая опыт европейских мастеров изобразительного искусства и музыки XVII-XX вв. разрабатывались принципы проектирования визуально-звуковой композиции в дизайне мультимедийных изданий.

Методы исследования:

Методологическую основу диссертации составили принципы системного анализа.

1. Сравнительно-описательный принцип, позволяющий сопоставить композиции разных видов искусства.

2. Модельно-аналитический, обосновывающий внутреннюю структуру композиционного решения, выявляющий взаимовлияние музыкальной и визуальной композиционной формы.

3. Проектно-экспериментальный, обеспечивающий апробацию выдвигаемых положений и разработку научно-методических рекомендаций для совершенствования процесса проектирования мультимедийных изданий.

Положения, выносимые на защиту:

1. Использование мультимедийных технологий позволяет создавать логично-структурированные информационные документы.

2. Метод сравнительного анализа композиций произведений живописи и музыки предоставляет возможность создания визуально-звукового синтеза.

3. Обращение к феномену взаимодействия визуальных и звуковых образов в мультимедиа открывает новые грани развития современной проектной культуры.

4. Подход к проектированию мультимедийных изданий на основе единых композиционных принципов позволяет создать синтез визуально-звуковых средств.

5. Предложенная методология проектирования визуально-звуковой композиции мультимедийных изданий и разработанный алгоритм действий позволяет повышать качество и интенсифицировать процесс проектирования.

Научная новизна исследования:

1. Обращение к теме синтеза визуально-звуковой композиции в дизайне мультимедийных изданий.

2. Постановка новых задач в проектировании мультимедийных изданий - создание визуально-звукового синтеза.

3. Разработка общей системы классификации визуальной и звуковой композиции на примере произведений искусства живописи и музыки.

4. Получение научно-обоснованных выводов при создании визуально-звуковой композиции в дизайне мультимедиа.

5. Осуществление общего подхода к анализу визуальной и музыкальной композиций.

6. Выработка основных принципов проектирования, способствующих осуществлению эстетического единства визуально-звуковой композиции в дизайне мультимедийных изданий.

7. Разработка научного подхода к методике создания визуально-музыкальных композиций в процессе обучения.

8. Введение в научный оборот единой терминологии для анализа визуально-звуковой композиции.

Теоретическая и практическая значимость исследования состоит: В теоретическом плане диссертационная работа дополняет и расширяет раздел теории дизайна, посвященный синтезу визуальных и звуковых средств и имеющиеся представления о синтезе визуального искусства и музыки в современной дизайнерской деятельности.

Обширный материал исследования, впервые обобщенный применительно к дизайну, ориентирован на практическое применение в новых компьютерных технологиях и включает в научный оборот новые данные о визуально-звуковой композиции в дизайне. Результаты, полученные в ходе исследования, использованы в учебном процессе.

Научные результаты:

1. Предложен единый системный подход к анализу композиции произведений визуальных искусств и музыки.

2. Проведен анализ смыслового соответствия используемых терминов.

3. Определена терминология, позволяющая анализировать композиции произведений визуальных искусств и музыки с единых позиций.

4. Выработаны новые подходы к разработке дизайнерских проектов, в задачи которых входит осуществление синтеза визуальных и звуковых средств.

Апробация и внедрение результатов исследования: В процессе научно-исследовательской работы по теме диссертации были сделаны доклады на конференциях СПбГХПА, СПбГУТД. Проведен мастер-класс в рамках культурной программы V-й петербургской биеннале дизайна «Модулор 2005»(тема: «Видимые образы звуков». (СПб, ЦВЗ «Манеж», 14 ноября 2005); Всероссийская научно-техническая конференция в сети Internet «Приоритетные направления развития науки и технологий» - 27 ноября - 7 декабря Тула, 2006 г. Тема: «Информационные технологии в обучении дизайнеров (Проектирование визуально-звуковой композиции мультимедийного издания)». По теме диссертации были опубликованы 6 статей. Список опубликованных статей прилагается.

Собранный материал лег в основу курса лекций для студентов СПбГХПА, ф-та «Дизайн», каф. «Коммуникативный дизайн» и учебного курса «Аудиовизуальные технологии в дизайне» для студентов СПбГУКИ, факультета информационных технологий и медиадизайна по специальности (080801) «Прикладная информатика в дизайне».

Проектная реализация описанных принципов была проведена в 2001-2006 годах. В СПбГХПА на ф-те «Дизайн», каф. «Коммуникативный дизайн» была проведена работа в качестве ассистента руководителя дипломным проектом «Музыкальный Петербург» 2001 г. В СПбГУКИ на факультете «Информационные технологий и медиадизайн» были выполнены следующие работы: руководство учебным проектом «Мелодии Летнего сада», занявшем первое место на Международном мультимедийном конкурсе фирмы Siemens «Молодежь и знания 2002»; проектирование учебного мультимедийного издания «История дизайна»; проектирование электронной визитной карточки «Международного фонда канцлера А.М. Горчакова».

Структура и объем диссертации. Диссертация состоит из введения, трех глав, заключения, списка используемой литературы объемом 138 стр. и приложения с иллюстративным материалом. В состав приложения входит компакт диск c звуковыми файлами и иллюстративным материалом. Список литературы из 150 источников.

Краткое содержание работы

Введение

Во введении дается общая характеристика работы, обосновывается актуальность темы и освещается состояние вопроса; определяются цель, задачи, предмет, объект, методы и границы исследования; описывается структура работы, а также формулируется теоретическая и практическая значимость работы.

Глава I. Развитие научной мысли в поиске визуально-звуковой гармонии

Аналогия «спектр - октава» была предложена И. Ньютоном в XVII веке. Им было введено «семицветовое» деление спектра и установлено соответствие между семью цветами и семью звуками гаммы. В XVIII веке Л.-Б. Кастель построил цветовой клавесин - первый цветомузыкальный инструмент. Результат его эксперимента подверг сомнению целесообразность проведения прямых соответствий «звук-цвет». Критики исходили из самодостаточности искусства музыки и живописи. В XIX веке французские и русские поэты-символисты увлеклись процессом «окраски» звуков. Данная проблема интересовала их больше применительно к поэзии, чем к музыке. В ХХ веке идеи И. Ньютона и Л.-Б. Кастеля были развиты В.Д. Барановым-Россине в его опытах с оптофоном.

§ 1. Поиски визуально-звукового синтеза в искусстве XX века

На примере творчества М.-К Чюрлениса, П. Клее и Я. Ксенакиса рассматривается влияние музыкальной логики на произведения визуальных видов искусства (живопись, графика, архитектура), перенос принципа построения музыкальной композиции в визуальную.

Исследуется влияние их поисков на современное решение задач, связанных с визуально-звуковым синтезом в дизайне. Литовский живописец и композитор М.-К. Чюрленис использовал временной фактор раскрытия содержания формы, что проявлялось в первую очередь в создании многочастных произведений. Швейцарский музыкант, живописец, график, преподаватель Баухауза П. Клее обратил внимание на сходство самого процесса временного развертывания композиционной формы музыкального и живописного произведений. Он перенес из музыки в живопись принцип всевозможного видоизменения материала в процессе сочинения, его варьирование, трансформацию, представление одного и того же объекта в множественности и изменчивости.

Французский архитектор и композитор, грек по происхождению, Я. Ксенакис в 1958 г. выстраивал структуру проекта архитектурного выставочного павильона фирмы «Филипс» на основе музыкальной партитуры «Метастазис», по принципу развития массы звуковых волн.

Мультимедийное издание, как правило, по своей структуре состоит из нескольких разделов, т.е. представляет многочастное произведение. Современные технологии позволяют раскрывать содержание в свободной последовательности, задумывать всевозможные изменения материала не только в процессе сочинения, но и непосредственно при показе.

Творчество М.-К. Чюрлениса, П. Клее, Я. Ксенакиса - уникальное, явление в мире визуального искусства. Их метод, способ проектирования и видение визуальной композиции необходимо изучать и использовать в процессе проектирования мультимедийных изданий.

В современных исследованиях по изучению взаимосвязи выразительных средств музыки и живописи на примере вокального искусства известна работа В.В. Визер. В книге «Взаимосвязь выразительных средств вокальной музыки и живописи» (2002 г.) преподаватель Тульского гос. ун-та и Тульской худ. школы им. В.Д. Поленова привела примеры аналогии характера использования выразительных приемов в живописи и музыке, с целью внести большую ясность и определенность в понимание выразительных средств живописи для начинающего художника.

§ 2. Взаимодействие выразительных средств в экранных искусствах

Рассматривается опыт создания звуко-зрительного синтеза в кино. Этому вопросу посвящены теоретические труды С.М. Эйзенштейна. Режиссер ставил задачу - найти ключ к соизмеримости между "куском музыки" и "куском изображения", решение которой позволило бы сочетать "по вертикали", то есть в одновременности, каждую фразу музыки с каждой фразой параллельно пробегающих “пластических кусков” изображения - кадров. К проблеме соединения выразительных средств в искусстве театра и кино обращался Р. Арнхейма в книге «Кино как искусство».

В исследовании также рассматриваются принципы подхода к анализу музыки, предложенные В.М. Лензоном в его диссертационном исследовании «Музыкальный анализ в профессиональной подготовке режиссера». Основной акцент автор делает на необходимости научить режиссера воспринимать музыку на слух, что созвучно задачам дизайнера, выбирающего звуковое сопровождение к мультимедийному проекту.

§ 3. Взаимодействие выразительных визуальных и звуковых средств в мультимедийных изданиях

В третьем параграфе приводятся аналоги современных мультимедийных изданий, посвященных искусству и культуре, на примере которых проведен анализ согласования визуально-звукового решения. Чаще всего собранный в них материал представлен только в виде текста. Такие мультимедийные издания воспринимаются как энциклопедии, предназначенные преимущественно для специалистов, поскольку не содержат дополнительной звуковой или визуальной информации.

Современные технологии позволяют разрабатывать мультимедийное издание, в котором информация различной природы присутствует равноправно и взаимосвязано. Поэтому при проектировании мультимедийного издания следует учитывать, что важная составляющая восприятия окружающего связана со способностью видения и отражена в традиции художественного творчества. В то же время, в культуре существует тонко разработанная система звуковых средств, которую тоже необходимо учитывать в процессе передачи представлений человека об устройстве мироздания. звук изображение мультимедиа дизайнер

Конкретизации задач дизайнера при выборе звукового материала и создании гармоничного образа проекта, единого визуально-звукового решения должен способствовать анализ и сопоставление композиции визуальных и музыкальных форм художественного освоения мира. Этому посвящена вторая глава настоящего исследования.

Глава II. Композиционные принципы взаимодействия визуальных и звуковых средств в произведениях живописи и музыки

Во второй главе проводится структурный анализ композиции произведений живописи и музыки. Устанавливаются закономерности в построении композиции. Главным в анализе музыкального материала является сравнение звучания разной организации многоголосия, благодаря чему развивается аналитическое слушание.

§ 1. Сопоставление понятий и терминов

В первом параграфе сопоставляются основные композиционные термины произведений визуальных искусств (на примере живописи) и музыки. Согласовываются понятия: композиция, структура, фактура, элементы композиции. Сопоставить композиций в живописи и музыке по формальным признакам и выявить общие принципы построения стало возможно, основываясь и развивая метод исследования произведений живописи, разработанный Г. Вельфлиным.

Специфика музыки заключается в наличии фактора времени. В музыке под композиционной схемой подразумевают взаимодействие частей музыкальной формы. Они бывают замкнутыми и открытыми, в зависимости от драматургии и динамики развития содержания. В живописи статика и динамика заключены в композиционной схеме картины, в характере взаимодействия элементов композиционной формы. От размещения элементов в композиционной схеме в некоторой степени зависит и принцип их взаимодействия в пространстве.

Структура взаимосвязи композиционных элементов, характер взаимодействия композиционных планов в теории музыки - это музыкальная ткань - фактура музыкального произведения. Фактура музыки - конкретная организация многоголосия, посредством которой создается художественное пространство произведений этого вида искусства - структура музыкальной ткани. В этом отличие от понятия фактуры в живописи.

Таким образом, в настоящем исследовании были обозначены следующие общие категории сопоставления:

1. Композиция:

a. композиционная схема,

b. динамика взаимодействия частей композиционной формы.

2. Структура:

a. структура взаимодействия элементов композиционной формы,

b. взаимодействие предмет - фон.

§ 2. Особенности живописных и музыкальных композиций в XVII-XX вв.

В XVII и XVIII веках в Европе, наблюдается независимое существование различных стилей, что представляет удивительный феномен своего времени. Однако в исследованиях, посвященных истории искусств, XVII век часто называют эпохой Барокко.

В произведениях живописи и музыки барокко присутствует общий принцип структуры взаимодействия элементов и строения композиционной формы, который можно использовать в проектировании мультимедийных изданий. В живописи наблюдается сложное взаимодействие элементов, которые связаны единым органическим действием и не могут быть отделены один от другого. Композиционные планы сталкиваются, пересекаются. На ближнем плане прорисовывается рельеф выступающих форм предметов, относящихся к разным композиционным планам (Пример: произведения П. Рубенса, К. Коэльо).

В инструментальной музыке эпохи барокко одной из распространенных музыкальных форм эпохи является фуга, для которой свойственен полифонический вид фактуры. В полифонических соединениях внимание слушателя скользит от яркой интонации одной музыкальной темы к другой, относящейся к новой теме, затем - к третьей (в третьем голосе), потом обратно к первой и т.д. В зависимости от жанра и формы музыкальное произведение этого стиля может иметь самостоятельное развитие мелодии на фоне сопровождения, но ее существенной особенностью является тесная взаимосвязь с фоном.

Динамика произведений живописи заключена во взаимодействии композиционных элементов и выбором определяющей композиционной схемы. Динамика развития композиции в музыке этого стиля заключается в организации и соединении частей композиционной формы (Д. Букстехуде, И. Пахельбеля, И.-С. Бах). Как концертная форма и все формы, связанные с прелюдированием, фуга является вариативной, реализующей определенный принцип в разных вариантах. Главные средства организации такой формы - разнообразие способов воздействия: тематическое развитие, переключение внимания с одного типа событий (полифония, рельефность проведения темы), на другой (гармония, фигуративный материал), пульсация формы.

Современная ситуация в искусстве и в дизайне своим разнообразием во многом близка далекой эпохе стиля барокко. Формообразование барокко складывается из калейдоскопичности образов, представляющих художественную завершенность.

Произведениям классицизма свойственна логика, ясность, последовательность композиционного рассказа. В структуре взаимодействия элементов разных композиционных планов живописных произведений наблюдается четкое разделение ближнего и дальнего.

Аналогично в музыке, мелодия в произведении классического стиля - мелодия в собственном смысле слова, ее отличительная черта - индивидуальность. Она может варьироваться по своей силе, выступая на первый план, сливаясь с фоном, но, тем не менее, не теряет своей отчетливости и индивидуальности.

В живописных произведениях классицизма (Н. Пуссен, Ж.-Л. Давид, Ж.-О. Энгр) предпочтение отдано вполне определенному типу композиционного построения. Это фронтально-центричное построение, при котором основные пространственные планы параллельны картинной плоскости, а точка схода попадает на вертикальную ось картины. При фронтальной композиции это решение способствует ясности и легкости восприятия.

Для музыкальных произведений классицизма характерны композиционные формы с кульминацией посередине. Функции частей музыкальной формы классицизма четко определены. В ней есть экспозиционная часть - вступление, развивающая, кульминационная и разрешающая - финал. Происходит непрерывный процесс становления образа и в конце - обобщение. Композиция имеет завершение. Особенности развития музыкального образа заключаются в способности непрерывно перерастать в иную образную индивидуальность, постепенно и целенаправленно трансформироваться (В.А. Моцарт, Л.-В. Бетховен, Ф.Й. Гайдн).

В произведениях живописи романтизма нет подчеркнутой объемности и линейности. Пластическая лепка формы, свойственная классицизму, уступает место мягкой, как бы завуалированной моделировке. Художники романтизма (А. Гро, П. Прюдон, Т. Жерико, Э. Делакруа) стремятся представить композицию как единое целое, а не сумму статуарных фигур. В их произведениях пейзаж не фон, а место действия, фон не безличен.

В живописи романтизма классицистическая композиционная система с выделением трех планов, среди которых, по сути, всецело доминирует средний, сменяется романтическим типом пространственного членения: два равнозначных плана, прямо или диагонально построенный первый и «даль».

Примеры: романтические пейзажи С. Щедрина, М. Лебедева, А. Иванова. Это обусловлено тем, что в произведениях романтизма поиски направлены на осознание границы конечного и бесконечного, человеческого и космического. Эта граница является одним из признаков романтического миросозерцания.

Аналогично в музыке романтизма, по определению С.С. Скребкова, происходит совмещение двух типов организации глубинности (художественного пространства музыкального произведения) - ее стабильного варианта (свойственного гомофонии) и мобильности - связанной с «диагональностью» (что характерно для полифонии). Между интонированием сопровождающих голосов и ведущей мелодией исчезает резкая граница, характеризовавшая гомофонию классической музыки (Ф. Шопен, Ф. Лист). В результате изменений в соподчинении главных и второстепенных элементов меняется композиционная схема и в живописи и в музыке.

Если для произведений музыки стиля барокко было характерно контрастное составление частей музыкальной формы, для классицизма - контраст функций разделов, в романтизме появляется новый тип контраста - контраст параллельно развивающегося тематического материала, что в результате оказывает воздействие на композицию - стирание отчетливой грани между частями композиционной формы и свободное смещение композиционного центра. Эти особенности можно использовать при выборе характера выразительных средств и структуры в дизайне мультимедийных изданий.

В импрессионизме мягкую моделировку элементов форм в произведениях живописи романтизма в импрессионизме сменяет вибрация цвета и света. Для живописи импрессионизма характерно использование смелых мазков чистого цвета (К. Моне, Э. Мане, О. Ренуар, К. Писсаро). В музыке наблюдается внимательное отношение к выбору источника звука, выстраивание гармонии звукового пространства посредством обособленных звуковых фигур (К. Дебюсси, М. Равель).

Внимание к чистому цвету в живописи, а в музыке к звуку, свойственное импрессионизму, сказалось на средствах, приемах и технике исполнения произведений. И в живописи, и в музыке в организации пространства (структуре взаимодействия элементов композиционной формы) наблюдается стирание четкой грани между главным предметом/звуковой темой и фоном/сопровождением.

Хотя композиционные схемы, свойственные романтизму и предыдущим историческим стилям, сохраняются, импрессионизм с его внимательным отношением к звуку и к цвету активизировал творческий поиск новых способов построения композиции живописных и музыкальных произведений в целом.

В мировой авангардной живописи на первый план была выдвинута проблема пространства. Поиски новой формулы пространства, ее художественного претворения во многом определили авангардное искусство в целом и оказали огромное влияние на принципы построения композиции, поиск новых выразительных приемов.

Переход к новым способам работы над композицией в живописи рассматривается на примере творчества В.В. Кандинского. В начале ХХ века не только В.В. Кандинский, но другие художники, например, К.С. Малевич испытали потребность в преодолении обыденной логики создания произведений реалистичной живописи. В те же годы переход к беспредметности осуществлял П. Мондриан. Хотя их поиски были различны. В.В. Кандинский превознес искусство ощущений и цвета.

Переход к работе с абстрактными формами и зарождение новых жанров, способствовали развитию пути свободной импровизации и обусловили поиск новых принципов объединения композиционных элементов.

В музыке своего рода отказ от тематического мышления, выраженный в переходе к атональности, к созданию музыкальной композиции на основе 12-тоновости, впервые произошел в творчестве А. Шёнберга, который был хорошо знаком с В.В. Кандинским. Все более широкое освоение звукового материала и эволюция в области форм привели в начале ХХ века к новому методу написания музыкального произведения - додекафонии. Закономерно изменилось отношение к первоначальному элементу (звуку) и к композиционной форме.

В области композиции разнообразные виды звукового конструктивизма начала ХХ века, ориентируются на какую-либо из сложившихся эстетических систем (барокко, классицизм, романтизм, импрессионизм) или на их смешение. Композиция в музыке ХХ века предоставляет огромное количество вариантов возможных компоновок звукового материала.

Проведенный анализ эволюции композиционных принципов в произведениях живописи и музыки способствует органичному усвоению широкого разнообразия выразительных визуальных и звуковых средств, особенностей композиции произведений искусств определенного исторического времени.

Систематизация исследованных материалов должна способствовать согласованию визуально-звукового решения, созданию визуально-звукового синтеза в дизайне мультимедийного издания.

Проведенный анализ ориентирован на практическое применение в области новых компьютерных технологий для разработки практических рекомендаций в области проектирования мультимедийных изданий и методики проектирования визуально-звукового синтеза в дизайне мультимедиа, описанной в третьей главе настоящего исследования.

Глава III. Проектирование визуально-звуковой композиции в дизайне мультимедиа

В третьей главе на примере объекта проектирования - мультимедийного издания, - разрабатывается метод включения в единую композицию таких типов средств передачи информации, как визуальные и звуковые. В данной главе затрагиваются вопросы, касающиеся технологии и программного обеспечения, которые используются в процессе проектирования мультимедийных изданий.

Предложен ряд принципов создания композиции и структурирования содержания мультимедийных изданий разработанных по результатам анализа композиции живописи и музыки, проведенного во второй главе исследования. Приводится обоснование разработанной методики, апробация которой проводилась в Санкт-Петербургской государственной художественно-промышленной академии, на ф-те «Дизайн», каф. «Коммуникативный дизайн» и в Санкт-Петербургском государственном университете культуры и искусств на факультете «Информационные технологии и медиадизайн».

§ 1. Мультимедийное издание как объект проектирования в дизайне

Термин «мультимедиа» определяет современное перспективное направление в области информационных технологий, с помощью которых можно осуществить интеграцию разнородных данных в компьютерных системах для более полного представления результатов интеллектуальных достижений человека в науке, промышленности, искусстве, образовании и других областях деятельности. С точки зрения дизайнера, мультимедийное издание должно иметь системный и выразительный образ, соединяющий в себе функциональность, удобство пользования, эстетически выразительную форму.

Композиция мультимедиа включает не только элементы визуального ряда: графику 2-х и 3-х мерную, фото-, видео-, шрифт, текстовые блоки, но и элементы звукового ряда: отдельные звуки, шумы, фрагменты музыкальных произведений, озвученный текст. Все эти элементы несут разную композиционную, смысловую и функциональную нагрузку.

Стройность, логика построения композиции в искусстве музыки во многом приемлема в проектировании мультимедийных изданий. Композиция мультимедийного издания, как правило, состоит из нескольких экранов, образующих единую композиционную систему.

Схему взаимодействия экранов регламентирует сценарий, определяющий структуру взаимосвязи разделов мультимедийного издания - частей композиционной формы. Логика, структура этого взаимодействия и может быть заимствована из искусства музыки.

Процесс создания визуально-звукового синтеза рассматривается как интеллектуальное действие, в результате которого в композиции мультимедийного издания определяется смысловое и функциональное значение отдельных элементов и система их взаимосвязей.

При этом в процессе проектирования композиции экранов учитываются принципы визуальных искусств, а в процессе раскрытия замысла, изменении функции и роли элементов - композиционные принципы музыки.

§ 2. Разработка методики проектирования визуально-звуковой композиции в мультимедийном издании

Известны следующие виды соотношения между звуком и изображением, которые могут оказывать влияние на целостную композиционную форму мультимедийного издания или на отдельные его части (разделы, динамические заставки, экраны):

1) звук подчинен решению визуальной композиции;

2) визуальное решение подчинено звуковой композиции;

3) звук разрушает визуальную композицию;

4) визуальная композиция вызывает свое звуковое решение, рождает новый визуально-звуковой образ.

Выбор этих соотношений зависит от цели и задач, которые выполняет звук в мультимедийном издании. Например:

1) включение звукового сопровождения в качестве нейтрального фона;

2) выбор звукового сопровождения в качестве фона согласно соответствию характеристик времени, стиля, места, для создания атмосферы действия;

3) звук как основной задающий элемент, являющийся отправной точкой создания визуальных образов;

4) синтез на основе создания целостного композиционного решения, единой звуко-визуальной конструкции.

В настоящей диссертационной работе исследование было направлено на поиск методики создания визуально-звукового синтеза на основе разработки единой визуально-звуковой композиции мультимедийного издания.

Следование разработанной методике подразумевает, что выбор звукового сопровождения и выразительного приема решения визуальной композиции осуществляется так, чтобы привести к соответствию не только образные характеристики, но согласовать композиционную структуру целостного визуально-звукового решения.

Разработанная методика заключается в использовании в процессе проектирования общих принципов построения композиционной формы, характерных для выбранного стиля:

a) состав всех элементов композиции, их смысловая и функциональная роль,

b) композиционная схема,

c) главные элементы,

d) второстепенные элементы,

e) принцип взаимодействия элементов.

Методика состоит из четырех ступеней.

Ступень 1. Знакомство с общими принципами построения композиции в искусствах живописи и музыки.

Эти вопросы раскрываются во второй главе настоящего исследования.

Ступень 2. Построение линейной композиции согласно выявленным общим закономерностям композиции в живописи и музыке.

Рассматриваются вопросы применения знаний, полученных из области композиции живописи и музыки, в новой мультимедийной среде. Задачи, связанные с синтезом, которые решаются на данной ступени, соответствуют сложности работы над мультимедийной презентацией, как правило, имеющей последовательную, линейную структуру раскрытия содержания.

Основываясь на анализе и сопоставлении композиционных принципов живописи и музыки, проведенном во второй главе настоящего исследования, были разработаны принципиальные схемы структурирования материала и взаимодействия элементов композиционной формы мультимедийного издания.

Известно, что помимо каких-либо специфических визуальных или звуковых компонентов в определении стиля участвуют такие компоненты, как общее чувство узнаваемости (“знакомости”) инвариантных структур, расположение композиционного материала. В мультимедиа изданиях стереотипы восприятия оказывают влияние, во-первых, на выбор графического решения, во-вторых, на выбор структуры электронного мультимедиа издания, в-третьих, на характер динамики развертывания композиции во времени.

Ступень 3. Создание визуально-звукового синтеза в композиции с нелинейной структурой мультимедийного издания.

Создание визуально-звукового синтеза в композиции мультимедийного издания обуславливает: выбор структуры издания и динамический прием композиционных изменений экранов. Взаимосвязь разделов и система перекрестных ссылок устанавливаются в зависимости от логики развития драматургии содержания и характерно выбранной стилевой композиционной системы.

Составной частью любой мультимедийной системы является интеллектуальный интерфейс, позволяющий пользователю, не имеющему специальной подготовки по вычислительной технике, использовать ЭВМ без посредников-программистов. Термин «интеллектуальный» отмечает способность интерфейса, к осуществлению преобразований в контексте предметной области.

Основными функциями интеллектуального интерфейса в мультимедийном издании являются обеспечение различных форм представления информации, в частности, выбор приемлемых способов организации диалога при взаимодействии с разнородными объектами с помощью графики и звука.

Проектирование композиции экрана мультимедийного издания, использующего в качестве интерактивных графические изображения элементов интерфейса, а также возможности согласования визуального решения со звуковым, - позволяют проверить работоспособность методики создания визуально-звукового синтеза в дизайне мультимедиа. При этом возможности гипертехнологии позволяют усложнить решение задачи, поставленной на второй ступени.

Ступень 4. Проектирование композиции на свободную тему.

Направлено на закрепление полученной информации о предложенных принципах создания визуально-звукового синтеза в композиции мультимедиа.

В процессе разработки научно-методологической основы создания визуально-звуковой композиции в дизайне мультимедиа были выявлены основные принципы проектирования:

1. Принцип целостного формообразования объекта определяет структуру мультимедийного издания, общий характер взаимодействия основных разделов (частей композиционной формы). Современные технологии позволяют объединять самый разнообразный материал, который должен быть цельно представлен. В зависимости от содержания на начальном этапе проектирования происходит распределение материала по разделам и определяется характер взаимосвязи и взаимодействия разделов между собой на содержательном, образном, функциональном и динамическом уровнях согласно требованиям к стилю проекта.

2. Принцип системной информативности предусматривает проектное воплощение графического интерфейса, задающего стиль мультимедийному изданию и отражающего общую структуру содержания диска. Принцип организации интерфейса отражает композиционную структуру всего издания. В структуре мультимедийного издания принцип системной информативности предусматривает согласование звуковой и визуальной системы подачи содержания. Это тип кодирования информации, динамический прием осуществления интерактивности элементов, а также динамика и время реализации смены информации на экране, в котором соотносится количество передаваемой информации ко времени ее передачи.

3. Принцип формализованного содержания - это проектирование от внутренней структуры к внешней оболочке. Особенность внутренней структуры взаимодействия композиционных элементов влияет на решение взаимосвязи разделов между собой и функции интерактивных элементов, как в структуре композиции отдельного экрана, так и в общей структуре сценария предъявления информации.

4. Принцип динамического развития основан на особенности предъявления и восприятия информации. Возможность динамичного предъявления информации влияет на композицию каждого отдельного экрана и определяет особенности композиционного формообразования мультимедийного издания в целом. Разные варианты преобразования графических элементов, осуществляющих переход на другой информационный уровень, другой раздел документа, могут приводить к разным формам раскрытия информации внутри этого уровня.

Анализ реализованных проектов показал работоспособность предложенной методики. Следование установленным принципам способствует успешному решению задач визуально-звукового синтеза в дизайне мультимедиа и может кардинально влиять на формообразование содержания и образ мультимедиа издания.

Были выявлены следующие вопросы, требующие дополнительного исследования:

1) отражение национального колорита во взаимодействии визуально-звуковых выразительных средств,

2) технологии обработки звука, с целью использования изменений звука в дизайне виртуальной среды для создания новых образов в мультимедиа.

§ 5. Технологические факторы, влияющие на создание визуально-звуковой композиции мультимедийных изданий

Исходя из принципа комплексного подхода к решению задач, связанных с визуально-звуковым синтезом в дизайне мультимедиа, можно выделить общие и специфические группы факторов, влияющих на его создание в дизайне электронных мультимедийных изданий, которые предназначены для просмотра на локальных ПК и в сетях Интернет.

К объективным факторам относятся требования, предъявляемые ко всем объектам проектирования в дизайне, это: эргономичность, конструктивность и функциональность.

Помимо перечисленных, на результат целостного композиционного решения проектов мультимедиа влияют и субъективные факторы. К ним относятся: факторы стиля (исторического, авторского, фирменного), соблюдение информационной логики содержания, а также следование сложившимся принципам подачи информации в компьютерных сетях.

Кроме того, существуют специфические факторы, влияющие на создание визуально-звуковой композиции электронных мультимедийных изданий. К ним относятся: технологические требования к объему графических и звуковых файлов (разные для проектов Интернет-изданий и локальных мультимедийных изданий), технологические требования к возможностям ПК, а также увеличение конкурентной среды.

ОСНОВНЫЕ РЕЗУЛЬТАТЫ И ВЫВОДЫ РАБОТЫ

1. В мультимедиа дизайнеру приходится сталкиваться с решением новых для него задач, связанных непосредственно с визуально-звуковым синтезом. Смысл и методология синтеза, создаваемого в композиции экрана мультимедийного издания, обнаруживается в технологии и творческом решении воссоединения пространства и времени, изображения и звука. Дизайн мультимедиа объединяет выразительные средства пространственных и временных искусств, которые не просто взаимодействуют, оставаясь самостоятельными феноменами, но существуют неразрывно.

2. Создание синтеза в дизайне мультимедиа требует особой формы мышления, позволяющей осуществлять единство визуально-звукового композиционного решения на чувственном и концептуальном уровнях проектирования. Подход к проектированию мультимедийных изданий на основе единства композиционных принципов позволяет выявить возможные формообразующие приемы и, исходя из этого, прогнозировать варианты предъявления всего разнообразия информации, содержащейся в мультимедийном издании.

3. Мультимедиа издания имеют специфическую особенность - интерактивность. В условиях роста спроса на мультимедийную продукцию возрастает роль дизайнера в разработке мультимедийных изданий. Помимо определения художественно-эстетического образа всего издания, в задачи дизайнера входит разработка функционального интерфейса. Кроме того, дизайн-решение должно соответствовать эргономическим требованиям, предъявляемым к электронным изданиям, предназначенным для просмотра на экране монитора.

4. Применение теоретических знаний из области музыки приводит к появлению нестандартных творческих решений в дизайне мультимедиа.

5. Систематизация методов и путей решения задач, связанных с визуально-звуковым синтезом в дизайне мультимедиа; выбор нового композиционного решения, поиск динамики соединения разделов (частей) композиционной формы, а также построение драматургии развертывания сюжета мультимедийных изданий - все это является результатом использования единого подхода в исследовании композиционных принципов произведений дизайна и музыки.

6. Выявление взаимосвязи и взаимовлияния визуального и музыкального искусства на значительном отрезке истории позволяет увидеть всю сложность проблем современного дизайна в области визуально-звукового синтеза и имеет немаловажное значение для последующего развития данного направления в дизайне.

РАБОТЫ, ОПУБЛИКОВАННЫЕ ПО ТЕМЕ ДИССЕРТАЦИИ

1. Демидова М.В., Журавская Т.М. Дизайн и музыка. Проблема синтеза музыкального и визуального ряда в дизайне / “Мейсмахеровские чтения”. Сборник научных трудов преподавателей и аспирантов за 2001 г. - СПб, 2003, Стр. 130-132

2. Демидова М.В. Творческий вклад музыкантов и композиторов первой половины ХХ века в дизайн / Сборник научных трудов преподавателей и аспирантов за 2002 г. - СПб, 2004, Стр. 75-80

3. Демидова М.В. Соединение выразительных средств искусства и музыки в проектах мультимедиа / “Время дизайна”. Материалы научной конференции. - СПб.: Изд-во «Петербургский институт печати», 2005, Стр. 53-56

4. Демидова М.В. О взаимодействии композиционных принципов визуальных искусств и музыки в проектах мультимедиа. / Информационные технологии в гуманитарном образовании: сб.ст. / Санкт-Петербург. Гос ун-т культуры и искусств, Стр. 192-198

5. Демидова М.В. Творческие поиски Пауля Клее начала ХХ века и дизайн мультимедиа. / “Время дизайна”. Материалы научной конференции СПб., 2006. - Стр. 35-38

6. Демидова М.В. Создание визуально-звуковой гармонии в дизайне мультимедийного издания. / Известия РГПУ им. А.И. Герцена. Аспирантские тетради 4(21). - СПб., 2006. - Стр. 12-17

Размещено на Allbest.ru