Курсовая работа: Методика анализа содержания текстов

Прежде всего исследователь должен учитывать реальную периодичность, цикличность, ритмичность в деятельности анализируемых СМК или отдельных газет, радио- и телеканалов. Ясно, например, что при анализе передачи, которая выходит в эфир один раз в месяц, и которая выходит несколько раз в день (информационные выпуски), мы должны будем предусмотреть - если нас интересует их сравнение - такой промежуток времени, чтобы обе эти передачи были представлены в нем равновесомо.

Если мы сравниваем ежедневную общенациональную газету с районной, которая имеет другую - более редкую - периодичность, соответственно, номеров для анализа ежедневной газеты мы можем брать меньше. Поможет принять тут правильную тактику такое методологическое объяснение, что чем чаще воспроизводятся в деятельности источника какие-то характеристики (а комплекс определенных характеристик программы «Время» воспроизводится, например, ежедневно), тем меньше единиц для наблюдения за этим источником нужно выбрать по сравнению с другим источником, характеристики которого воспроизводятся реже.

Если мы интересуемся какой-либо одной характеристикой в деятельности источника, то мы при определении выборки руководствуемся следующими соображениями. Рассмотрим их на примере программы «Время», на характеристике «Обоснование коммуникатором выбора факта». Допустим, что мы на основании пробного пилотажного исследования, предварительного знакомства с этой телевизионной информационной программой убедились, что существуют такие виды этого обоснования:

1 - сюжеты с лексической маркировкой времени события;

2 - сюжеты с лексической маркировкой качественных признаков события и факта;

3 - сюжеты без лексического обоснования выбора факта.

Начиная отслеживать материал (точка отсчета, начало отсмотра произвольно задается самим исследователем в зависимости от его интереса к определенному временному периоду), мы фиксируем все случаи появления разных видов «обоснования выбора факта». Как только появилась наиболее редко встречающаяся характеристика, мы можем закончить наше микроисследование. Мы получили результаты классического типологического исследования: мы получили количественное распределение массива информации по одной интересующей нас характеристике. Оказалось, что нам понадобилось проанализировать для этого 6 - 7 телевыпусков программы «Время» (табл. 3.3).

Таблица 3.3

Распределение сюжетов программы «Время» по обоснованию выбора факта за май - июнь 1985 г. (в абс. цифрах)

Если бы нас интересовала частотность появления в эфире областей, краев, республик России, можно было бы заведомо утверждать, что в эфир пройдет гораздо больше выпусков «Времени», пока в поле внимания коммуникатора, а значит, и исследователя, попадет наименее часто упоминаемая территориальная единица.

С учетом такого поведения реальных характеристик содержания исследователь, включающий в одну программу исследования до десятка признаков, берет достаточно большой отрезок времени, чтобы подстраховать себя. В случае с ежедневной газетой, информационной программой и т.п. это, как правило, два-три месяца.

Если исследователя заинтересует какое-либо конкретное событие, происходящее сегодня в мире, и информационная политика нескольких источников по освещению этого события, то потребуется сплошное наблюдение за всеми источниками в сроки, максимально совпадающие с самим событием. Если мы вспомним исследование газеты «Истинный американец», то пропуск какого-то номера за исследуемый период дал бы великолепную возможность адвокату подследственных оспорить выводы экспертов. Или вообразим, что мы исследуем освещение ведущими телеканалами России кризис в Косово. Ясно, что исчерпывающий ответ на вопрос, как освещали этот конфликт ОРТ, РТР, НТВ и т.д., мы получим, если в поле зрения попадет весь временной отрезок этого конфликта.

Следует предусмотреть чисто организационные моменты. Сегодня нашелся заказчик, который заказывает вам исследование информационного источника, и как всегда в таких случаях, результаты ему требуются «вчера». Сколько вам понадобится времени, чтобы разработать программу исследования, осуществить собственно анализ, написать комментарий и сдать отчет заказчику? Тогда проблема срока наблюдения за объектом приобретает совсем другой характер. И ничто тут не заменит опыта исследователя, а также его знания всех элементов, из которых состоит исследование. К следующему такому элементу мы и переходим.

Полевой этап

Каждое социологическое исследование венчается результатом. Но ему предшествует большая работа, собственно социологическое «поле» - сбор информации, обработка, и только после этого - написание отчета. Чаще всего именно последняя стадия становится известной широкой научной общественности и лишь отдельные фрагменты предшествующей работы попадают в поле ее зрения. Методические работы, воспроизводящие и объясняющие инструментарий исследования, его средства и способы добывания научного знания рассчитаны, как правило, на более узкую аудиторию профессионалов, издаются малыми тиражами, быстро становятся библиографической редкостью.

Вот почему возникает необходимость в пределах этого пособия обсудить некоторые проблемы профессиональной «кухни» контент-аналитика. Это не заменит специальной работы для каждого отдельного исследователя, когда он окажется на этой стадии - скорее, это будет акцент на самом важном для этого этапа.

Формулировка задач, которые поставил перед собой исследователь, тесно увязывается в самом исследовании с теми способами получения социологической информации, которые мыслятся самим автором как наиболее адекватные. Образно говоря, социологический инструментарий - это та узда, которой сдерживается воображение социолога. Ставя перед собой определенную задачу, он должен примерить ее на способы решения.

Далее в рассуждениях автора должен появиться сам объект исследования: исследователь описывает этот объект - информационный источник в определенных границах его деятельности, обосновывая отбор единиц наблюдения. Описание выборки мы осуществили в предыдущем параграфе этого раздела, но не исключено, что на реальном исследовании стоит прибегнуть к консультации математика-специалиста по теории выборки. Следующий шаг - составление кода и инструкции к нему. Эти документы разрабатываются в тесном взаимодействии со специалистом, который будет осуществлять обработку полученной информации на ЭВМ. Чем в большей степени построение документа, на котором будет фиксироваться исходная информация, будет соответствовать правилам ввода информации в компьютер, а также правилам ее дальнейшей агрегации, тем меньше затрат вам потребуется на этой стадии.

После составления кода требуется специальная стадия - проверка кода на соотносимость результатов ( reliability ). Как правило, эта стадия состоит в том, что исследователь предлагает для анализа по данному коду один и тот же текст нескольким кодировщикам и проверяет, однообразно ли они используют код и насколько сходятся их результаты [19]. Другой вариант проверки - повторно дать закодировать этот же текст нескольким кодировщикам по истечении определенного промежутка времени. Цель в данном случае та же: посмотреть на идентичность анализа, так сказать, «во времени и в пространстве».

Все необходимые поправки и изменения, которые еще можно будет предусмотреть в коде и в инструкции к нему, следует делать имено на этой стадии. Как только начнется само исследование, то есть работа большого коллектива кодировщиков над текстами, вошедшими в выборку, поправки будут означать сбой в работе. Инструкции уже напечатаны, кодировщики проинструктированы - работу эту придется начинать заново.

Пока же «снимаются» все вопросы кодировщиков, происходит коллективное обсуждение реальной кодировки, оттачиваются примеры, которые должна содержать инструкция [20]. Так, в исследовании российской прессы на предмет ее отношения к лидерам и фракциям Госдумы, на которое мы уже ссылались, инструкция содержала примеры конкретных текстов из реальных газет, содержащих разные оценки: «Пока же преимущество в искусстве ведения судебного спора явно на стороне президентско-правительственной команды. Во-первых, она хорошо подобрана и в ней четко распределены роли. Впереди официальные представители - Сергей Шахрай, Юрий Батурин и Олег Кутафин. Все трое - юристы со степенями, хорошо освоившие приемы публичного спора. И психологическая уравновешенность у них тоже на высоте». («Авторов Чеченской республики пока не нашли» // Известия, 13.07.95) - позитивная оценка С. Шахрая, как лидера определенной фракции ;

«Кроме Егора Гайдара, предстоящие выборы могут принести большое разочарование и Жириновскому и его ЛДПР. Некогда мощнейшей партии сегодня симпатизирует лишь 6,6 процента голосов. Очевидно, имиджу Жириновского не помог пролитый в сражении с Б. Немцовым апельсиновый сок. Да и в целом скандальностью наших людей теперь удивить крайне трудно, хотя тяга к ярким личностям остается». («Аркадий Вольский встретился...» // Комсомольская правда, 01.07.95) - негативная оценка Жириновского и его фракции;

«Иван Петрович Рыбкин символизирует интересную тенденцию в российской политике. Его опыт, предшествовавший посту председателя Госдумы, оказался уникальным. Он хорошо знал законы аппарата, обрел незаурядные качества публичного политика в оппозционном состоянии. Наконец, это человек природного ума. Рыбкин внешне открыт и опрощен, но внутренне у него есть та российская хитринка, когда "сказка ложь, да в ней намек". Полтора года в логове Госдумы Иван Петрович осуществлял психотерапевтические функции и занял уникальную позицию. Сегодня он представляет интересы многих социальных групп в кремлевско-президентском властном режиме. Но надо же было такому случиться, чтобы Президент Ельцин двумя словами всю эту изнурительную работу опрокинул». (Интервью Г. Бурбулиса «Какофония новой власти» //Аргументы и факты. 1995. № 28) - сбалансированная оценка И. Рыбкина и негативная -Госдумы.

Мы специально привели эти примеры - установки руководителя исследования здесь недостаточно и некоторые кодировщики оценили второй пример как сбалансированную оценку В. Жириновского, а третий пример как позитивную оценку И. Рыбкина. Недаром в итоге оказалось, что степень совпадения мнений кодировщиков в той части иследования, которая касалась фиксации оценок, равнялась 88% (76%, когда речь шла о сбалансированных оценках, 89%, когда речь шла о позитивных оценках, 91% - нейтральная подача, 92% - негативные оценки).

Чтобы представить себе детализацию проблем в тексте инструкции, приведем начало инструкции к этому исследованию: «Кодировщик читает всю газету целиком, чтобы не пропустить упоминания интересующих исследование Субъектов/Объектов анализа, которые перечислены на карточке для кодировки. Кодировка начинается с того, что выписывается дата и номер газетного выпуска и число материалов с упоминаниями. После того как на отдельном листке выписаны заголовки всех материалов, где встретились эти упоминания, - чтобы не упустить ни одного из них, - приступаем к анализу каждого из этих материалов. Для этого требуется более скрупулезное, внимательное, чем на первой стадии, чтение каждого из этих материалов». И далее подробно объясняется каждая характеристика, даются примеры, объясняются способы фиксации результатов (если обработка результатов ручная) и т.д.

Если пробный анализ показывает недостаточную степень совпадения (американские авторы допускают в некоторых случаях степень совпадения в 60%), следует выяснить причины - это могут быть как механические ошибки (пропустил, не отметил и т.д.), так и содержательные расхождения - закодировано неправильно. Поэтому пилотный анализ должен предусмотреть проверку каждого материала - кто из кодировщиков допустил ошибки.

Более сложная процедура оценки работы с кодом - это проверка результатов на их обоснованность ( validity ) [21]. Общая идеология, связанная с проблемой обоснованности в социологических методах (в специальной литературе можно встретить и языковую кальку «валидность»), выражается в том, что исследователь предоставляет проверяемые доказательства, что именно, какую характеристику он измеряет.

Хрестоматийным примером в таких случаях является ссылка на такой измерительный прибор, как часы, измеряющие хронологическое время. Исправные, не останавливающиеся часы - надежный инструмент регистрации времени. Если же мы не знаем, по какому часовому поясу выверены эти часы, то их точные показания для нас бесполезны: мы не знаем, какое время, что именно они измеряют. Часы как инструмент не обоснованы [22].

Результаты анализа будут считаться обоснованными, если методика анализа замеряет в массиве текста то, что предполагалось замерять. Американский специалист в области контент-анализа У. Даниельсон приводит на этот счет такой пример. Допустим, вы фиксируете заметки, которые вы определяете как информацию о преступлениях, но действительно ли эта информация помещается для того, чтобы повествовать о преступлениях? Исследователь, отвечая на вопрос, должен обосновать свое определение преступления и такой заметки. Ему придется сказать, что в эту группу он относит происшествия, которые расцениваются юридическими властями, или общественностью, или, наконец, прессой как криминалистические по природе, а не как шалости подростков или результат паники. Иногда приходится прибегать к соображениям здравого смысла по принципу «широко известно...». Главный принцип - чтобы не было большого разрыва между категориальной сеткой и эмпирической действительностью.

Так, в ходе многочисленных исследований прессы мы убеждались, что при определении оценок, отношения автора текста к описываемым им событиям недостаточно оперирования только качественными прилагательными «хороший», «плохой». Про одного героя он напишет, что тот вытащил ребенка из проруби, или помог старушке перейти улицу (был у нас в отдаленные времена такой стереотип «хорошего» пионера - он обязательно поможет старушке перейти улицу), а про другого (скажем, депутата В. Жириновского), что тот в политической дискуссии облил своего коллегу апельсиновым соком или просто покажет это. А потом еще раз покажет... Средство не из слабых.

Нельзя было игнорировать эту мощную оценочную палитру. Поэтому в ходе многочисленных исследований, которые я цитирую и в которых выступаю как автор методики и интерпретации результатов, используется в инструкции кодировщикам такое требование-объяснение: «Оценка формируется как с помощью "сильных" оценочных эпитетов, обнаруженных в тексте, так и самим содержанием ситуаций, в связи с которыми появляется в тексте интересующий нас субъект или группа: это могут быть как положительные ситуации, с которыми традиционно, в массовом сознании ассоциируется "благо ", так и ситуации, с которыми ассоциируется "зло "».

Именно здесь мы должны упомянуть характеристику нашего метода, которая нами еще не привлекалась для его описания. В наборе характеристик метода мы находим такое ограничение, что анализ работает только с «открытым» ( manifest ) содержанием [23].

Обычно в качестве примера этой характеристики используют как объяснение на уровне здравого смысла, так и в сугубо научной парадигме. Начнем с первого. Фраза, произнесенная женщиной в адрес своей соперницы: «Какая чудная шляпка на вас!» - может быть расцеена мужчиной так, как будто о шляпе говорилось, что она выше всяческих похвал, красивая и элегантная. Женщина же скорее заподозрит, что при этом в шляпе хотели подчеркнуть, что она «дешевая, немодная, аляповатая, и скорее бы подошла юной девушке». И хотя аргументация черпается тут из области психологии, контент-анализ не может работать на значениях и смыслах второго, скрытого плана, он будет оперировать содержанием, что называется, «на поверхности».

Действительно, если представить множество жанров на протяженности по мере того, насколько адекватно они воспринимаются потенциальной аудиторией, одинаково понимаются, то информационная заметка из СМК окажется на одном конце, а заумная мистическая поэма - на другом (поскольку вариабельность прочтения ее разными людьми возрастает многократно). Анализ содержания работает как раз с теми текстами, где вероятность одинакового понимания смысла очень высока. И это не случайно. Содержание СМК потому (в том числе) и является массовым, что оно рассчитано на максимально возможное одинаковое понимание. В этом его природа. И анализ содержания как методика его изучения «снимает» именно этот уровень значений. Все остальное для него - от лукавого.

Именно поэтому и нужны тесты на обоснованность кода - что понимается разными кодировщиками под значением текста, и что говорит нам об алгоритме «декодирования» этого значения предлагаемая для исследования инструкция.

Один из тестов на обоснованность результатов, который, судя по специальной литературе, использовался неоднократно, состоит в том, что исследователь, исходя из того, что содержание меняется определенным образом, предсказывает, что измерение другого периода покажет точно такое же соотношение характеристик.

Проблематика, которую мы обсудили, позволяет нам нагрузить некоторые принципиальные характеристики анализа содержания, которые мы приводили ранее, такими обертонами, которые без дополнительной информации на их счет остались бы непонятыми. Объективность анализа состоит также и в том, что категории, которыми оперируют в исследовании, определены так четко, что различные исследователи, анализируя одно и то же содержание с помощью этих определений, получают один и тот же результат. Кто-то может не согласиться с тем определением оценки, которую мы только что привели, и будет использовать свою метрику - брать только качественные прилагательные как фактор отношения. Результаты будут разные, но ведь и методика была разной. Если вы принимаете мою методику и работаете с ней, мы закодируем текст совершенно одинаково, а значит, получим на выходе одинаковый результат.

После обстоятельного разговора о выборе единиц наблюдения станет понятным, что систематичность анализа состоит в том, что этот выбор должен основываться на формальных, беспристрастных признаках, другими словами, исследователь не может выбрать для анализа только те части текста, которые подтверждают его гипотезу, и отвергать другие. Это требование позволяет избежать аргументированной подтасовки фактов.

Перечисление этапов исследования выводит нас еще на одну очень важную характеристику контент-анализа, как и любого другого социологического исследования - научная строгость исследования подразумевает обязательное соблюдение этих этапов с набором требований, предъявляемых каждому из них.

Полевая стадия исследования, как никакая другая, связана с такими характеристиками исследования, а значит, и его программы, как его организационные параметры - этапы исследования, сроки исполнения, способы обработки, задействованные в исследовании исполнители, финансовые затраты. Зависимость содержательных характеристик и финансовых затрат огромна. Финансирование социологического исследования никогда не бывает абстрактным - чаще всего средства адресуются конкретным проектам. В таких случаях само обоснование исследования - некоторая гарантия финансирования работы. Более того - в последнее время многие проекты защищают свое право на существование на конкурсной основе. Программа исследования тут вполне способна показать товар лицом.

[1] Ядов В.А. Социологическое исследование. М., 1998.

[2] Danielson W. Content Analysis in Communication Research // R. Nafsiger and D. White (eds). Introduction to Mass Communication Research. Lousiana , 1963.

[3] Имеется в виду генеральный проект «Функционирование общественного мнения в условиях города и деятельность государственных и общественных институтов», реализованный в Институте конкретных социальных исследований АН СССР в 1967-74 гг. (руководитель проекта доктор философских наук Б.А. Грущин). См.: Массовая информация в советском промышленном городе. Опыт комплексного социологического исследования / Под общей ред. Б.А. Грушина, Л.А. Оникова. М., 1980; см. также Федотова Л.Н. Анализ содержания местных газет, радио и телевидения как источников информации. Автореф. дис. на соискание ученой степени канд. Филолог. наук. М., 1969. В настоящее время данные этого исследования можно запросить по электронному адресу butaev @ expert . extech . msk . su (база данных INSYS ).

[4] См.: Федотова Л.Н., Красавченко И.А. О критериях отбора фактов для информационной телевизионной программы // Вести. Моск. ун-та. Сер. 10. Журналистика. 1986. №6

[5] Оказывается, в свое время И. Кант размышлял над тем, как измерять информацию. Он считал, что ее нужно мерить по тому времени, которое нужно для усвоения ее адресатом. Этот пример приводил в своих лекциях Ю.А. Левада.

[6] Классификация телепередач ЮНЕСКО (1983 г.) имеет такую типологию: информативные передачи, образовательные программы, культурные программы, религиозные, программы для детей, развлекательные, реклама. По этой классификации, которая в инструкции хорошо детализирована, ЮНЕСКО осуществило международное исследование.

[7] Следует иметь в виду, что если в ходе анализа окажется, что эта «свалочная» яма чересчур переполнена, то надо признать неудачной саму классификацию, причина также может быть в том, что вы недостаточно ясно описали признаки каждой группы в этой классификации и кодировщик затрудняется принять решение - ему легче отнести это к «трудным» случаям. В любом случае обнаружить причину поможет стадия пилотного (или, как говорят некоторые социологи, пилотажного) анализа, которая для этого и существует.

[8] См .: Lerner D., I. Pool, Lasswell H. Analysis of Political Ideologies // Public Opinion Quarterly. 1952. Vol.15. No.4. P.720.

[9] См.: Федотова Л.Н. Массовая информация… С. 31-56.

[10] 47 пятниц, выпуск 5: Контентный анализ - методика и организация / Редактор-составитель и автор предисловия В.В. Сазонов. Информационный бюллетень ИКСИ АН СССР. 1969. №15. С.187.

[11] См.: Федотова Л.Н. Массовая информация… С. 57-94.

[12] Wolfenson W. Consumerism and Consumption: A Message Systi Analysis of Television Commercials. University of Pennsylvania . 1980.

[13] Kerrick .I. The Influence of Captions on Picture Interpretation // Journalism Quarterly. 1955. Yol. 32. No.2.

[14] Stone Ph., D. Dunphy, M. Smith, D. Ogilvie. The General Inquirer: A Computer Approach to Content Analysis. Cambridge , 1966.

[15] См.: Федотова Л.Н. Социологи анализируют прессу // Вести. Моск. ун-та. Сер.11, Журналистика. 1976. №6. С. 82-85. В моем архиве давно хранится вырезка из газеты «Советская культура» (21.05.85), где рассказывается, как через компьютер был пропущен роман классика итальянской литературы Алессандро Мандзони «Обрученные». Оказалось, что роман состоит из 8950 слов, некоторые из которых повторяются неоднократно - общий итог 223000 слов. Филологи также узнали, что самыми употребляемыми подлежащими были «дом» и «слово», прилагательными - «большой» и «добрый», наречиями - «хорошо» и «мало». Главная героиня, деревенская девушка Лючия, чаще всего произносит слово «сердце».

[16] Известно, что с началом перестройки в России произошел настоящий «бум» прессы. Тогда известный российский социолог А.Н. Алексеев (Санкт-Петербург) создал специальный фонд российской прессы периода начала перестройки. Исследователь, который поставит своей задачей провести контент-анализ прессы этого периода, вспомнит об этом фонде.

[17] Доклад был представлен на Международном конгрессе социологов по проблемам, массовых коммуникаций (круглый стол по контент-анализу). Барселона, Испания, 24-29 июля 1988 г.

[18] При отборе опрашиваемых случайным методом социологи часто пользуются списком избирателей, где алфавитный принцип списка существенно «перемешивает» население. См.: Капелюш Я.С., Сазонов В.В., Федотова Л.Н. Учреждения культуры в небольшом городе и население. М., 1985. С. 10.

[19] В профессиональной литературе термин « reliability » переводится также как «надежность» и «устойчивость». Обсуждение общих проблем соотносимости /надежности см., например. Anastasi A. Psychological Testing. New York : McMillan, 1961; Garrett H. Statistics in Psychology and Education. New York : Logmans, 1955; Guilford J. Psychometric methods. New York : McGraw-Hill, 1954.. обсуждение специального применения методик в контент-анализе см.: Janis I ., R . Fadner and M . Janowit z. The Reliability of a Content Analysis Technique // Public Opinion Quarterly. 1943. Vol.7. No.2. P.243.

[20] См . об этом : Lasswell H. and associates. The Politically Significant Content of the Press: Coding Procedures // Journalism Quarterly. March 1942. Vol.19. No. l. P.12-21.

[21] Janis I. The Probli of Validating Content Analysis // Lasswell H., N. Leites and associates. Language ot'Polilics: Studies in Quantitative Siantics. Revised Edition. Cambridge , Mass. : The M. I. Т . Press, 1965.

[22] Горбунов Н. Обоснованность, надежность и переносимость вопросников // Труды по социологии. Выпуск 2. Тарту, Тартуский Государственный университет. 1972. С .195-221. См . также Alien R. Personality Assessment Procedures. New York : Harper, 1958; Cattell R. and Warburton F. Objective Personality and Motivation Tests. Chicago : University Illinois Press, 1967.

[23] Лассвелл употреблял этот термин по контрасту со «скрытым, подразумеваемым» ( latent ) содержанием и определял его так: «Мы расцениваем содержание как открытое, если слова интерпретируются так, как они понимаются большинством носителей данного языка». См .: Lasswell H. The Uses of Content Analysis Data in Studying Social Change // Science and Culture. 1967. Vol. 33. No. 4. P. 163.

Список литературы

Для подготовки данной работы были использованы материалы с сайта http://www.i-u.ru/