6 анализ документов его виды принципы приемы. Анализ документов: основные виды. Правила работы с документами

Метод анализа документов

Метод анализа документов – метод сбора данных в ходе проведения исследований систем управления, основанный на применении информации, зафиксированной в письменной или печатной форме, на магнитной пленке, в электронном виде, в иконографической форме и др.

Понятие документа.

Документом в социологии называется специально созданный человеком предмет, предназначенный для передачи или хранения информации. В повседневной жизни понятие «документ» фигурирует в своем узком значении – как официальная бумага. Такой документ должен обладать видимыми признаками официального статуса: печатями, штампами организации и т.д. Документами в этом смысле можно назвать паспорт, официальное письмо, историю болезни и т.д. В социологии термин «документ» используется в предельно широком значении - как любой носитель информации о социальных явлениях и процессах. Кроме того, любой документ – всегда и репрезентация самого автора, выраженная в содержании документа, его стиле и средствах выражения. Отсюда и определенная вторичность этого метода: здесь исследователь не имеет прямого контакта с той реальностью, которую изучает, как это имеет место при наблюдении, опросе. Любой документ – всегда кодированная информация, вбирающая цели и намерения коммуникатора, его видение, интерпретацию реальности. Все разнообразие документов, используемых в социологическом исследовании, может быть «уложено» в классификации, построенные по различным основаниям.

По критерию «статус документа» могут быть выделены документы:

официальные;

неофициальные. К официальным относятся законы, постановления, протоколы собраний, материалы статистической отчетности, архивы и т.д. К неофициальным – личные письма, дневники, материалы вторичного анализа, сделанные исследователем, любительские видеофильмы и т.д. По критерию «степень персонификации документа» можно выделить документы:

личные;

безличные .

Личными считаются авторские документы: очерк в газете, автобиография, дневник, письма, а также документы, относящиеся к конкретному человеку: читательский формуляр в библиотеке, деловая характеристика, история болезни и т.д. Безличные документы, напротив, не имеют конкретных авторов и не относятся к тому или иному человеку: статистические материалы, протоколы собраний, законы, финансовая отчетность и т.д. По критерию «ситуация создания документа» можно выделить:

спровоцированные социологом документы;

неспровоцированные (естественные).

К спровоцированным относятся такие документы, которые создаются специально для целей исследования по просьбе социолога. Это могут быть школьные сочинения, автобиографии, мемуары. Неспровоцированные – это все другие виды документов, естественным образом существующие в социуме, «обслуживающие» нашу повседневную жизнь. Широко распространена в литературе и классификация по видам материальных носителей . Здесь выделяются документы:

письменные (все виды печатной и рукописной продукции);

иконографические (видео-, кино-, фотодокументы, картины, гравюры и т.п.)

фонетические (радио- и магнитофонные записи. грампластинки и т.п.)

Из этого понятия исключены такие серьезные источники информации, как предметы материальной культуры и быта. Ценность этих объектов для получения определенной социальной информации не подлежит сомнению, однако включение предметов материальной культуры и быта в понятие документа привело бы к неправомерному расширению понятия (т.о. документами оказались бы дома, мосты, мебель, авторучка и т.д.).

Традиционный и формализованный анализ документов: возможности и ограничения, традиционные направления исследований. Анализ документов - это совокупность методических прие­мов и процедур, применяемых для извлечения из документальных источников социологической информации при изучении социальных процессов и явлений в целях решения определенных исследователь­ских задач. Круг документов, содержащих в себе интересующую социо­лога информацию, настолько широк и настолько информативен вследствие чрезвычайной широты и разнообразия, отображаемых в них различных сторон социальной действительности, что практиче­ски любое конкретное социологическое исследование должно начи­наться с анализа существующих по исследуемой проблеме документов. В классическом социологическом исследовании используются преимущественно два вида анализа документальной информации:

неформализованный (традиционный);

формализованный .

В свою очередь, формализованный вид анализа может быть представлен тремя разновидностями:

контент-анализом или анализом содержания;

анализом статистической информации;

информативно-целевым анализом текстовой информации.

Традиционный анализ документальной информации Традиционный анализ документов представляет собой сово­купность определенных логических построений, направленных на раскрытие основного содержания изучаемого материала.

Традиционный анализ документов состоит из исследования содержания документов:

Целей создания;

Форм и видов;

Надежности документов;

Достоверности используемой информации.

Данный метод используется при анализе:

Функциональных обязанностей в сочетании с анализом приказов о поощрении;

Справок по результатам проверки деятельности подразделений;

Писем, жалоб, приходящих в аппарат управления.

Неформализованный анализ основывается на «понимающем» восприятии текста: выделении блоков идей, соответствующих целям анализа. Дело в том, что в большинстве случаев интересующая социолога информа­ция, содержащаяся в документах, присутствует в них в неявном, скрытом виде, в форме, отвечающей целям, во имя которых доку­мент был создан (статистический отчет, закон, информационное со­общение и т.п.), а это далеко не всегда совпадает с интересами и за­дачами социологического анализа. Традиционный анализ позволяет преобразовать первоначальную форму информации, содержащейся в документе в ту форму информации, которая интересует исследова­теля. Такое понимание текста достигается за счет усилий ума: использование логических операций синтеза, анализа, сравнения, оценивания и т.д. С позиции методологии количественного подхода этот вид анализа недостаточно хорош, т.к. «страдает» субъективизмом исследователя, а значит, и возможностью смещения информации, отклонением от «истинного положения дел». В самом деле, понимание текста зависит не только от степени владения исследователем мыслительными операциями, но и от его психофизиологических особенностей: утомляемости, способности концентрировать внимание, памяти и т.д. На восприятие текста большое влияние оказывают и неосознаваемые психические феномены, в частности механизм психологической защиты, когда неприятные для исследователя моменты «сами собой» пропускаются в тексте, а, напротив, приятные сразу бросаются в глаза. Существенна здесь и роль интуиции, знания предмета изучения, а также ценностных ориентаций, мировоззрения исследователя, выступающих своеобразной базой оценки, платформой, с позиции которой и воспринимается анализируемый текст. Следует отличать такой вид анализа документальной информации от простого понимания тех или иных текстов , с которыми каждый человек имеет дело в повседневной жизни: мы читаем и понимаем газетные статьи, книги, учебники. Неформализованный анализ как метод исследования предполагает восприятие текста в контексте исследовательской задач . Это означает, что в соответствии со строгой логикой количественного подхода социолог выдвигает исследовательские задачи, формулирует гипотезу и только потом ищет в тексте подтверждение или опровержение выдвинутой гипотезе. Вместе с тем в этом своем качестве неформализованный анализ документальной информации в классическом исследовании используется довольно редко именно в силу названных выше недостатков. В то же время на разведывательном этапе роль его достаточно велика : вкупе с другими методами – свободным интервью, индивидуальными или групповыми формами экспертного опроса – он помогает социологу выделить грани проблемы, более других нуждающиеся в изучении, определить предмет исследования, сформулировать гипотезу. Но и на этом, разведывательном этапе и отмечается главная черта неформализованного анализа документа как метода исследования: понимание, восприятие текста здесь происходит в контексте цели исследования, тех исследовательских вопросов (или задач), которые социолог ставит перед собой, приступая к исследованию. В традиционном анализе различают внешний и внутренний . Цель внешнего анализа - установить вид документа, но форму, время и место появления, автора, инициатора, цели его создания, насколько он надежен и достоверен. Каков его контекст. Пренебрежение таким анализом во многих случаях грозит неверным истолкованием содержания документа. Достоверность. Документы могут стать источником получения необходимых сведений об изучаемом объекте только тогда, когда социологами оценена надежность имеющейся в их распоряжении документаль­ной информации. При оценке надежности документальных данных необходимо учитывать ряд обстоятельств. Во-первых, официальные документы, как правило, более надежные, чем неофициальные. Во-вторых, личные документы (характеристики, карточки индивиду­ального учета, анкеты и др.) обладают большей степенью надежно­сти, чем безличные (данные прессы, протоколы собраний, заседаний и др.). В-третьих, повышенной надежностью обладают документы юридического характера (постановление суда, нотариально заверен­ные данные и др.), а также те документы, которые подвергаются финансовому контролю (сведения об изготовленной продукции, о заработной плате и т.п.). В-четвертых, необходимо учитывать, что некоторые личные документы - автобиографии, воспоминания и др. - имеют тенденциозный характер и в силу этого позволяют оце­нить некоторые личностные качества их авторов - одаренность, скромность, либо самовлюбленность, заносчивость и т.п. Следует выяснить, каким намерением руководствовался составитель документа, что поможет выявить умышленные или непроизвольные искажения. Цель внутреннего анализа - исследование содержания документа. По существу вся работа социолога направлена на проведение внутреннего анализа документа, включающего выявление различия между фактическим и литературным содержанием, установление уровня компетенции автора документа в делах, о которых он высказывается, выяснение его личного отношения к описываемым в документе фактам. Направление исследований. Есть отрасли социологии, которые закономерно используют традиционный анализ документов, другие используют его ограничено. К числу первых относятся девиантология, гендерные исследования, социология семьи, социология личности, социология культуры, те области, где центральным объектом интереса является индивид как носитель социального и индивидуального опыта. В девиантологии аспектом интереса является ориентация на понимание жизненного опыта этих людей и попытка объяснить их психологию. Гендерные исследования – это относительно новая область российской социологии, изучающая различия мужских и женских моделей поведения и их вариативность в определенных социальных контекстах. Эта область преимущественно рассчитана на качественные методы, при этом используются разнообразные тактики: кейс-стади, истории жизни, истории семьи. Формализованный анализ.

Формализованный анализ документов – метод сбора данных при помощи количественного описания имеющейся информации в документах. Анализу подвергаются различные источники информации:

Официальные документы организации (устав, указы, приказы и др.);

Логотипы;

Эмблемы;

Этикетки;

Видеозаписи;

Газетные и журнальные статьи;

Фотографии и др.

Именно как альтернатива традиционным неформализованным методам анализа документов возникли формализованные стандартизированные методы анализа содержания документальных источников. Они стали складываться в сфере социологических исследований средств массовой коммуникации, и в первую очередь – газет и журналов. Объективной предпосылкой возникновения этих методов стала массовизация информационных и пропагандистских процессов, рост читательской аудитории и увеличение числа источников печатной информации и объема содержащейся в ней информации. Стремление избавиться от налета субъектив­ности, вполне возможного при осуществлении традиционного ана­лиза, привело к разработке существенно иного вида формализован­ного анализа документов, т.е. контент-анализа. Применение контент-анализа началось еще в 30-х годах XX века известным социологом Г. Лассуэлом в сфере политики и про­паганды, но получило широкое распространение, начиная с 50-х го­дов, когда в США вышел фундаментальный труд Б. Берельсона "Контент-анализ в коммуникационных исследованиях". Этот вид анализа ориентирован на извлечение социологической информации из больших массивов документальных источников, трудно поддаю­щихся или вовсе не поддающихся традиционному интуитивному анализу. Он основан на выявлении определенной совокупности ко­личественных, статистических характеристик текстов (или сообще­ний). При этом предполагается, что количественные характеристики содержания изучаемых массивов документов отражают некоторые существенные особенности изучаемых социальных явлений и про­цессов, например, тематика телепередач, время, отводимое для тех или иных тем телевизионными компаниями, отражают в той или иной степени интересы зрительской аудитории, информационную политику данного источника информации и существующие в обще­стве нормы их взаимодействия.

Направление исследований.

Техника контент-анализа находит широкое распространение в социальных исследованиях. Применявшиеся вначале для изучения эффективности массовой пропаганды, этот прием стал ныне сильным средством анализа всевозможных официальных документов. Контент-анализ применяют также в практике изучения писем, поступающих в различные организации и органы управления, в политологии, в социальной психологии и педагогике и т.д. Характеристика видов и методических особенностей традиционного анализа документов. Дискурс анализ Понятие дискурса разрабатывалось с 60-х гг. в работах Д.Остина, Д.Серля, Г.Горфинкеля и др. в русле анализа устной коммуникации. С точки зрения Бламера, социальная проблема не существует, пока она не признана; только получив признание общества, социальная проблематика попадает в поле зрения социологов. Поэтому должно быть введено понятие анализ дискурса, так как необходимо изучать процесс, посредством которого общество признает социальные проблемы как фокус конфликтных интересов, намерений и целей. Другое направление связано с именем лингвиста де Соссюра, им дискурсы понимаются как способы речи, институционализированные и подчиненные определенным правилам. Опосредованная масс-медиа, общественная дискуссия на политические темы становятся публичным дискурсом как род непрямого разговора среди отсутствующих. Здесь подчеркивается важный момент коллективной интерпретации действительности. Обе формы дискурса, речевая интеракция и институционализированная форма производства текстов, имеют общие черты: интерес не к единичному акту проговаривания или действия, а к их образцам или правилам. Составные части дискурса: говорящий → высказывание (форма и содержание) → слушатель (публика). С помощью языка как «знаковой системы» мы производим значения, выступающие в свою очередь как типизированные схемы. Отсюда и понятийный аппарат анализа дискурса – репертуар интерпретаций, фрейм (рамки), образцы толкований, story line (линия рассказа), script (сценарий) и т.д. Анализ дискурса заключается в том, чтобы реконструировать процессы социальной объективации, коммуникации и легитимизации смысловых структур на основе описания практики институтов, организаций соответствующих коллективных актеров и проанализировать социальное влияние этих процессов. Эмпирическая программа анализа дискурса выглядит как ряд последовательно выполняемых задач или задаваемых вопросов:

как возник данный дискурс

какие изменения фиксируются в нем со временем

на какие предметные сферы и на какую аудиторию он рассчитан

какие латентные и манифестирующие сюжеты (в смысле когнитивных схем восприятия «предметного содержания») он проводит

насколько успешен данный дискурс, насколько он влиятелен

Например, превращение в рамках определенных дискурсов ребенка – в плод, зародыш, «жизнь» в смысле религиозной ценности – разводит публичную дискуссию об абортах по разным ведомствам: секулярной социальной политики, медицинской темы пренатальной терапии или церковных институтов. Поэтому борьба конкурирующих или воюющих дискурсов прежде всего ведется за основной тезаурус, описывающий социальную проблематику в определенных терминах. Grounded theory (обоснованная теория) «Обоснованная теория» - это определенный способ обработки уже готовой собранной информации , содержащейся в документах – транскриптах интервью. Кратко эту логику можно проиллюстрировать следующим образом. Есть некоторый набор случаев (документов – транскриптов интервью), например A,B,C,D,E,F. Берем документ A и изучаем его характеристики. Ему присущи признаки P,R,S. Кратко это можно записать так: A (P,R,S). Исследуем другие документы таким же образом: B (Q,R,S); C (Q,R,S); D (K,R,S); E (K,P,S); F (K,Q,S). Сравнивая эти случаи (документы), можно сделать вывод: общим и повторяющимся будет признак S. Остальные признаки либо специфичны только для отдельного случая, либо исследователь не сумел выделить нечто существенное, что объединяло бы эти разные признаки. В конечном итоге вывод может быть следующим: для существования феномена N необходимым и достаточным является наличие признака S и любых других, общих для изучаемых случаев. Отсутствие этих признаков свидетельствует и об отсутствии самого феномена. Характеристика видов и методических особенностей формализованного анализа документов: информационно-целевой анализ, контент-анализ. Как замечает В.А.Ядов: "Желание избавиться от субъективности традиционного анализа породило разработку принципиально иных, формализованных, или, как часто их называют, количественных методов анализа документов. Информативно-целевой анализ больших текстовых массивов Российским исследователем Т.Дридзе был разработан еще один вид формализованного анализа, правда, только текстовой информации – информативно-целевой . В рамках этого подхода текст рассматривается как целостная иерархическая содержательно-смысловая структура , объединенная авторским замыслом. Это объединение функционально, т.е. ориентировано на достижение конкретной цели общения. Основная задача метода состоит в том, чтобы оценить конкретный текст с точки зрения его первичной и вторичной информативности . Первичная информативность характеризуется не абсолютным количеством информации в тексте, а лишь той ее частью, которая станет достоянием человека, воспринимающего информацию. Первичная информативность описывает потенциальную способность конкретного текста донести замысел, основное коммуникативное намерение автора до потребителя. Информативно-целевой анализ как метод изучения содержания документальных источников ориентирован на свойство их вторичной информативности . Это свойство допускает многофункциональную интерпретацию содержания текста. Обращаясь к тексту, пользователь может извлекать не только ту информацию, которая отражает коммуникативное намерение автора, но и другую, отвечающую познавательным целям самого пользователя. Это означает, что первичная и вторичная информативности чаще всего не совпадают друг с другом, создавая «смысловые ножницы». На основе информативно-целевого анализа текстов, в той или иной мере содержащих сведения об избранной для изучения сфере образа жизни, мы можем, с одной стороны, получить целостное представление о содержании и структуре нормативного сознания (перечни действующих общих и конкретных правовых, морально-этических, эстетических и прочих норм и общепринятых ценностей) как одном из условий деятельности социальных субъектов. С другой стороны, могут быть получены сведения о распространенных и рекомендуемых моделях деятельности и взаимодействия: перечни функций и признаков, присущих разным социальным субъектам, общих и частных целей деятельности в целом и по частным действиям, а также самих действий, операций. Контент-анализ. Процедура формализованного анализа документов заключает­ся в выделении в изучаемом тексте определенных, интересующих исследователя элементов содержания, классификации выделенных элементов, в соответствии с концептуальной схемой исследования, последующем их подсчете и количественном анализе. Контент-анализ основан на стандартизации процедур поиска, определении в содержании изучаемого документа единиц счета, в качестве каковых выступают отдельные слова (термины, имена политических деяте­лей, названия партий и движений, географические названия и т.п.), суждения, выраженные в форме предложений, абзацев, фрагментов текстов, оценки, точки зрения, аргументы, а также различные виды публикаций (по тематике, жанру, типам авторов и др.). Определение единиц счета зависит от целей исследования. Содержательным ядром контент-анализа выступает логиче­ская модель предмета анализа, в которой взаимодействуют три элемента: 1) категориальная модель предмета анализа; 2) система единиц анализа; 3) меры (единицы) измерения. Категориальная модель предмета анализа включает в себя параметры и категории анализа, отражающие признаки изучаемого объекта, их основные характеристики и аспекты, соответствующие целям и задачам социологического исследования. При этом пара­метры анализа соответствуют признаку объекта исследования, а кате­гория анализа - значению данного признака. Например, в процедуре контент-анализа, проводимого социологом в рамках исследователь­ского проекта "Активизация экономического поведения различных групп населения Беларуси", одним из существенных параметров яв­ляется тема "предпринимательство". А категориями контент-анализа данной темы в различных видах документов - в законах о развитии предпринимательства, статистических материалах, публикациях в прессе и т.п. - будут такие понятия, как "предприниматель", "средний бизнес", "малый бизнес", "рынок капиталов", "рынок товаров" и т.п. Таким образом, параметр контент-анализа жестко задан про­блемой и задачами исследования, а категории анализа более гибко приспособлены к тому процессу или явлению, которое предстоит анализировать, и тем задачам, которые придется решать в процессе исследования. Следовательно, каждый параметр контент-анализа может быть представлен в виде определенного набора, а еще лучше (особенно если необходимо учитывать характер взаимосвязей меж­ду различными аспектами изучаемого признака) в виде целостной системы категорий анализа. ВЫВОД Приемы качественно-количественного анализа документов. Основная трудность при работе с доступными (т.е. нецелевыми) документами - умение читать данные на языке гипотез исследования. Ведь документ был составлен вовсе не для того, чтобы проверить гипотезы социолога. Поэтому, прежде чем анализировать документальные материалы по существу, социолог вынужден проделать утомительную работу поиска в документе индикаторов (признаков) ключевых понятий исследования. Количественный подход может содействовать выявлению устойчивых тенденций в стратегии пропаганды, определению в ней наиболее важных тем, направлений, задач. Однако здесь возникает опасность просмотреть определенные сдвиги в ее стратегии, которые могут быть выражены в незначительных на первый взгляд высказываниях. Поэтому количественный анализ должен постоянно дополняться качественным. На основании последнего могут быть изложены определенные уточнения и усовершенствованы способы количественного анализа. Вообще, метод анализа документов практически так же универсален , как и опросные методы. С его помощью можно получить информацию о прошлом, настоящем и будущем : реконструировать давно ушедшие, но значимые для живущих сегодня людей социальные явления и процессы; описать образы будущего страны, поколения, отдельной социальной группы. Кроме того, документы содержат информацию о поведении и результатах деятельности людей, так же как и об их сознании: оценках, мотивах, жизненных планах, ценностных ориентациях. Этот метод дает возможность не только реконструировать событие, социальное явление, но еще и понять образ мыслей, ожидания, надежды и разочарования тех или иных социальных общностей. С его помощью можно понять, какие культурные модели были в ходу в стране на конкретном витке ее истории, какие нормы, «правила игры» тогда существовали, как они принимались. Качественный анализ документов - необходимое условие для всех количественных операций.

Анализ документации

Анализ документации (англ. document analysis ) - это метод сбора данных посредством анализа документов для их последующей интерпретации и оценки программы . Термин «документация» означает процесс формального закрепления данных, полученных из письменных, устных, графических или археологических источников. В связи с чем, для исследователя документ является источником получения информации об интересующем его объекте. Этот источник информации может быть представлен в форме текстового материала, в формате visual media (включая аудио-ленты, фотографии, фильмы, и видеозаписи), а начиная с недавнего времени и в формате электронных данных. Сейчас оценщики используют e-mail переписку, мультимедиа и форумы как новые формы документации, которую нужно тщательно исследовать для достижения целей оценивания.

Цель анализа документации

Целью анализа документации является сбор фактов . Например исследователь может изучить брошюру программы, чтобы определить её основные цели и задачи, собрать дополнительные сведения. Но не все документальные факты подлежат анализу и оценке. Как правило исследователь анализирует документацию для того, чтобы найти те или иные факты в подтверждение гипотезы , которую он уже заранее для себя сформулировал. То есть анализ документации заключается в выборе из имеющихся документов «нужных» фактов. Таким образом, вопросы, гипотезы или общие идеи исследователя действуют как критерий для отбора фактов для их дальнейшей интерпретации и получения выводов. Анализ документации является лучшим методом поиска ретроспективной информации относительно программы и подчас может являться единственным источником получения такой информации. Анализ документации может быть проведен в любой момент, что особенно полезно на начальной стадии оценки, когда исследователю необходимо изучить программу, историю её реализации и определить её основные цели, задачи и т.д. При выполнении анализа документа, оценщик выясняет, какая информация уже собрана, а какую только предстоит собрать для оценки программы.

Преимущества анализа документации

• Документация содержит полный объем данных

В отличие от коротких выборочных исследований, которые проводятся оценщиками с целью получения информации о реализации программы и позволяют получить крайне ограниченный объем информации, документация по программе ведется с начала её создания до получения конкретных результатов и их анализа. Поэтому документы содержат полный объем информации, позволяют оценить общую картину реализации программы, а также построить прогнозные оценки и выявить основные тренды развития. Некоторые виды информации могут быть эффективно собраны именно посредством анализа документа. Очень часто оценщик должен знать заявленные цели программы, и документы - это источник такой информации. Вместо огромных затрат времени на общение с персоналом программы, подобная информация может быть получена из основных документов.

• Документы содержат более надежную информацию

Информация, получаемая посредством анализа документации зачастую является более достоверной и надежной, чем какая-либо другая. Результаты интервьюирования зависят от репортера, его умения задать «правильные» вопросы для получения релевантной информации – велик субъективный фактор. Интервьюирование основывается на памяти репортера, в то время как анализ документа не подчинен этому недостатку. Полученные со слов опрашиваемых данные могут содержать в себе фактические ошибки в силу неосведомленности респондентов или по причине неаккуратности репортера. Официальная документация как правило тщательно проверяется и свободна от пристрастий и необъективности репортера.

• Анализ документации экономит ресурсы и время

При проведении опросов и интервью необходимо заранее договариваться о встрече и тратить на сбор необходимой информации значительное количество времени, после чего полученную информацию необходимо зафиксировать и выполнить отчет. Ничего из этого не нужно осуществлять при анализе документации, так как она может быть проведена в любое время и не требует кооперации большого числа людей. Документы часто находятся в общем пользовании и доступны в любое время при минимальных затратах.

• Некоторая информация может быть получена только из документов

Анализ документа может выявить информацию, которая не могла бы быть получена через опросы . Например, один исследователь, демонстрируя Ирландское доминирование в Бостонских общественных школах, идентифицировал Ирландские фамилии в списке служащих, определив таким образом, их долю в общем числе служащих. Подчас персонал не склонен отвечать на вопросы, в связи с чем документы остаются единственным источником информации. Крайне сложно получить ретроспективную информацию о программе, особенно если её реализация уже завершилась. Люди, инициировавшие проведение программы, а также активно в ней участвовавшие могут не помнить всех деталей или оказаться недоступными на момент проведения оценки.

Недостатки анализа документации

• Обман со стороны автора документа

Часто документы пишут таким образом, чтобы программа выглядела лучше, чем она есть на самом деле. Подобное «приукрашивание» самой программы, хода её реализации и результатов вводит в заблуждение исследователей и может привести к неправильным интерпретациям и выводам оценщиков.

• Документ может содержать ошибки

Документ - это письменный отчет и также может содержать некоторые фактические ошибки. Очевидна связь содержания документа с памятью человека, ответственного за его составление. Отчеты могут отражать ошибки клерков, типографские ошибки, погрешность измерения , или содержать прямой обман. Отчеты агентств могут быть неточными или устаревшими.

• Документы не всегда достаточно детализированы

Несмотря на то, что исследователю может быть доступен весь объем документации, зачастую она не будет содержать большую часть необходимой информации и/или достаточно детализироваться. В Коннектикуте, например, государственные эксперты, осуществлявшие оценку программы социальной помощи студентам, получили огромное количество материалов, но так и не смогли выяснить, на основании какого критерия из 30000 студентов были выбраны лишь 6000. Если исследователь заинтересован внутренними процессами и процедурами принятия решения, необходимые данные скорее всего будут недоступны.

• Документы зачастую не содержат определений и остаются неясными

Определения и категории, используемые в документе, могут не удовлетворять исследователя и оставаться неясными, что затрудняет понимание сути программы и сбор необходимых фактов для достижения цели. Например, Hendrickson и Barber (1980) описывают оценку программы, когда в документации программы не содержалось ни одного развернутого определения используемых категорий данных, а заново нанятый персонал не имел опыта в сборе и документировании информации.

• Документация подвержена влиянию субъективного фактора

Любой документ отражает в себе то, что думал и знал на момент составления документа его автор. Документальные факты никогда не бывают «чистыми», так как не могут существовать в такой форме и всегда являются отражением мысли составившего документ человека. Это значит, что при первом рассмотрении документа, необходимо обращать внимание не на факты, в нем содержащиеся, а на человека, который составил этот документ. В идеале, в первую очередь необходимо изучить автора, а уж затем его документ, с тем чтобы понимать цель его составления и видеть возможные ошибки - намеренные или случайные.

• Документ может содержать нерепрезентативные примеры

Основным критерием сбора любой информации является репрезентативность выборки. Это делается для того, чтобы полученные данные не содержали в себе концентрации каких-либо сугубо конкретных признаков, а представляли общую картину в целом. Однако документ, как и любой другой источник информации, не защищен от подобной ошибки. Если примеры, приведенные в документе, не являются репрезентативными, то есть характерными для данного явления в целом, исследователь получает неадекватную картину происходящего, результатом чего могут стать смещенные оценки программы и неправильная интерпретация результатов. Единственным способом проверки данных на репрезентативность является сравнение зафиксированной в документе информации с информацией, полученной из других источников другими методами.

Виды анализа документации

• Отслеживание (англ. Tracking ) – это процесс изучения документации с целью сбора информации, которая подтвердит или опровергнет гипотезу исследователя. Когда исследователь начинает изучать программу, результаты её реализации, его интересует, что именно привело к такому стечению обстоятельств, почему произошло именно так, а не иначе. Исследователь строит гипотезу, своё предположение относительно того, что послужило причиной этому, а затем шаг за шагом начинает проверять её путем анализа документов. Для оценки текущих результатов оценщик «возвращается» назад, воссоздавая ту цепочку событий и явлений, зафиксированных в документах, результатом которых стали имеющиеся итоги.

• Анализ содержания документа (англ. Content Analysis ) - это метод анализа документации, который заключается в применении научных методов анализа документа с точки зрения его содержания. Основной формой анализа содержания документа является определение четкости и разборчивости текста самого документа, выявление степени его удобочитаемости (англ. readability ). Подобный анализ включает в себя определение среднего числа слов в предложении, число общеопнятных слов, число сложных и длинных предложений и число абстрактных идей. Анализ документов с точки зрения их содержания также дает существенное представление о сути программы, которую необходимо оценить.

• Агрегирование имеющихся данных (англ. Case-Study Aggregation Analysis ) - это метод анализа документации, который заключается в сборе всех имеющихся исследований, программ и документов на интересующую тему для агрегирования всего массива информации. Данный метод анализа документации позволяет понять, какая информация уже собрана и проанализирована, и какую информацию необходимо собрать. Агрегирование имеющихся данных позволяет собрать весь массив добытых сведений у одного исследователя или оценщика, что позволяет ему более адекватно понять суть той или иной программы.

Определение надежности документа

Существует четыре основных правила для определения степени надежности документа:

• Неполное наблюдение или плохая память являются причинами неадекватности утверждений. В результате. чем большее количество времени прошло с момента реализации программы до составления документа, тем менее надежен этот источник информации;
• Все документы составляются с определенной целью. Некоторые представляют собой отчеты о проделанной работе, другие составляются как обращение или пропаганда других людей. Чем серьёзнее было намерение автора составить простой отчет по фактической реализации программы, тем надежнее документ;
• Чем больше конфиденциальность информации, тем надежнее документ, так как конфиденциальная информация предназначена для внутреннеого пользования "посвященным" кругом людей, которым нет необходимости обманывать самих себя;
• Утверждения опытного образованного исследователя более правильны, нежели заявления простых наблюдателей. То есть чем больше опыт человека, составлявшего документ, тем надежнее информация содержащаяся в нем.

Особый интерес в современных условиях представляет анализ финансовой документации . Любое воздействие, будь то программа социальной помощи населению, сокращение налогового бремени или введение новых стандартов технического регулирования, ведет к перераспределению ресурсов, изменению затрат и выгод субъектов и объектов воздействия. В условиях ограниченности ресурсов и высоких рисков вопрос оценки результативности расходов становится все более актуальным. В связи с чем, для оценки целесообразности проведения программы необходимо сравнить издержки и выгоды от её реализации в целом для всего общества. Получить необходимую для этого информацию можно с помощь анализа финансовой документации.

Под финансовой документацией понимаются не только документы в узком смысле, но и проведение сбора исходных данных в публичных источниках, анализ данных статистических служб, анализ состояния цен, запросы котировок цен и т.д.

Анализ финансовой документации позволяет оценить масштабы реализации программы, источники её финансирования , а также механизмы реализации программы. Данный метод сбора информации позволяет выявить основные цели и приоритеты в реализации программы и является дополняющим к экспертным опросам и опроса представителей отрасли.

Одной и форм оценки целесообразности программ путем анализа финансовой документации является финансово-экономическое обоснование . В соответствии с Регламентом Государственной Думы Российской Федерации, Регламентом Правительства Российской Федерации, проекты нормативных правовых актов, реализация которых требует финансовых или материальных затрат, должны сопровождаться финансово-экономическим основанием, которое, по сути, также оценивает целесообразность реализации того или иного государственного вмешательства и результативность расходов. Финансово-экономическое обоснование позволяет обосновать необходимость введения нормативного правового акта исходя из положительного воздействия на общественное благосостояние.

1. Encyclopedia of evaluation. Sage Publications, 2005.
2. Caulley, D. Document analysis in program evaluation. Evaluation and Program Planning, 1983.
3. Guba, E.G., Lincoln, Y.S. Effective Evaluation. San-Francisco, 1981.
4. Hendrickson, L., Barber, L. Evaluation and Politics: a critical study of a community school program. Evaluation review, 1980.
5. Murphy, J.T. Getting the facts. Santa Monica, 1980.
6. Weiss, C.H. Evaluation Research, 1972.

Wikimedia Foundation . 2010 .

• Википедия

ИСО 9004-1-94: Управление качеством и элементы системы качества. Часть 1. Руководящие указания - Терминология ИСО 9004 1 94: Управление качеством и элементы системы качества. Часть 1. Руководящие указания: 8.7. Анализ готовности продукций к реализации Следует определить возможности организации для поставки новой или модернизированной… … Словарь-справочник терминов нормативно-технической документации

оценка - 3.9 оценка (evaluation): Систематическое определение степени соответствия объекта установленным критериям.

Анализ документов как метод социологического исследования представляет собой отбор, изучение и использование документов, содержащих социологическую информацию, раскрывающую изучаемую проблему. Данный метод чаще всего применяется при формулировании концепции исследования, а также при необходимости документального подтверждения социологических фактов.

Таким образом, анализ документов рассматривается как один из методов систематического анализа документов, направленный на получение информации, значимой для целей исследования.

Рассмотрим основное назначение метода анализа документов в социологическом исследовании:

* зафиксировать ее в виде признаков (категорий анализа);

* определить надежность, достоверность, значимость документальной информации для целей исследования;

* выработать с ее помощью объективные и субъективно-оценочные характеристики и показатели исследуемого социального процесса или явления.

Поскольку основным объектом анализа в данном методе является документ, есть необходимость разобраться в основной терминологии и видах документов.

Документом , рассматриваемым как объект социологического анализа является специально созданный автором (коммуникатором) материальный предмет, предназначенный для фиксации, передачи и хранения инфор­мации. Документы одновременно содержат в себе два вида информации . Во-первых, информацию о фактах, событиях, ре­зультатах деятельности индивидов, коллективов, общества в це­лом. Во-вторых, в самом документе, его содержании, структуре, стиле, средствах выражения представлена определенная авторская позиция, оценка, которая может служить объектом социологического анализа.

Реципиент - получатель информации, субъект, воспринимающий адресованную ему информацию. Субъект, обладающий информацией, реагирующий на сообщение - респондент.

Разновидности документов:

1.) по социальному уровню коммуникатора (кем создан):

· отдельное лицо;

· группа лиц.

2) по функции документа (его влияние на реципиента):

· информационно-ознакомительная;

· регулятивно-побудительная;

· коммуникативная (установление связей);

· ценностно-ориентационная (воспитательная).

3) по виду публикаций (к кому обращен):

· не предназначен для публикации (оглашения);

· публикация для ограниченного круга лиц средствами групповой информации;

· массовая публикация СМИ.

4) по форме и средствам фиксации информации:

· словесная (текст);

· статистическая;

· идеографическая (символическая);

· иконографическая (видео, кино, фотодокументы);

· фонетическая (аудиозаписи).

· исторические;

· статистические;

· художественные;

· правовые и др.

Классификация источников документальной информации:

Þличные документы (дневники, записи, письма, рукописи, мемуары, автобиографии, конспекты и пр.);

Þдокументы учреждений, организаций (приказы, постановления, распоряжения, инструкции, должностные положения, планы, служебные записки, заявления, протоколы, отчеты и пр.);

Þстатистические данные (государственной, отраслевой, местной статистики, статистики учреждений, организаций, частей и пр.);

Þпубликации, научные, литературные, политические (научные отчеты, книги, периодические издания, СМИ);

Þархивы (государственные (РГАУ), республиканские, отраслевые, местные; система научно-технической информации; банки данных отраслевых и министерских центров; банки данных предприятий и организаций и пр.).

В социологическом исследовании используются два основных вида анализа документов:

1) Традиционный (неформализованный, качественный). Такой метод анализа документов, при котором исследователь основывает свои выводы на общем восприятии и интуитивном поиске информации в содержании документа.

2) Контент-анализ (от англ. content analysis - анализ содержания; формализованный, количественный). Данный вид анализа представляет собой достаточно строгую процедуру качественно-количественного анализа содержания документов в целях выявления или измерения социальных фактов, отраженных этими документами. Как правило метод контент-анализа связан с подсчетом некоторых повторяющихся в документе элементов (понятий, тем, имен и др.). Для этого в документе выделяют категории анализа - ключевые понятия, содержательно описывающие проблему исследования и единицы анализа - тему в тексте, слова или сочетания слов, прямо или косвенно описывающие категории анализа.

Процедура контент-анализа включает :

* выделение в тексте смысловых единиц (категорий анализа);

* последующий подсчет частоты их употребления в документе (тексте);

* установление соотношений различных элементов текста друг с другом, соотношений с общим смыслом, назначением и объемом информации в документе (тексте).

Достоинства метода:

* постоянство исследуемого объекта;

* представление информации в обобщенном виде;

* возможность сравнивать факты разных периодов, в трактовке разных лиц;

* возможность анализа внетекстовой реальности, авторской позиции.

Недостатки метода:

* возможность искажения информации в силу ее вторичности;

* пассивность исследования;

* возможность упущения важных признаков объекта исследования;

* несовпадение языка документа с языком исследования.

Опрос

Социологический опрос - непосредственное или опосредованное, письменное или устное обращение к респонденту с вопросами, содержание ответов на которые раскрывает проблему анализа.

Опрос является основным методом социологического исследования, с его помощью добывается до 90 % всей социологической информации. В условиях военной службы опрос наиболее часто применяется в следующих случаях:

* при оценке морально-психологического климата в подразделениях и частях;

* для выявления общественного мнения в воинских коллективах;

* при изучении ценностных ориентаций, мотивации к воинской деятельности, интересов отдельных военнослужащих;

* при оценке компетентности, профессиональной подготовленности должностных лиц и т.д.

Основными видами опроса являются:

1. Анкетный опрос.

2. Интервью.

3. Экспертный опрос.

Рассмотрим более подробно каждый из данных видов опроса.

Анкетный опрос (анкетирование) - один из основных видов социологического опроса. В анкетном опросе взаимодействие между исследователем и респондентом (опрашиваемым лицом) осуществляется посредством анкеты.

Таким образом, анкетирование можно определить как метод сбора социологической информации, основанный на опосредованном обращении к исследуемой совокупности с вопросами, содержание которых представляет проблему исследования.

Важной особенностью анкетного опроса является тот факт, что исследователь практически не может лично влиять на ход опроса, поэтому содержание анкеты, введение к ней, комментарии и инструкции являются единственным средством мотивации респондента к добросовестным ответам.

Современная классификация анкетных опросов представлена разветвленной структурой, в которой по различным основаниям можно выделить следующие несколько видов анкетирования.

В зависимости от способа доставки и вручения анкеты респонденту различают :

* прессовый опрос (публикация анкеты в прессе);

* личный опрос, раздаточный опрос (анкеты вручает респонденту исследователь-анкетер).

Наиболее надежным среди данного вида опросов является опрос, который организует и проводит специально подготовленный анкетер. Зная цели и задачи опроса, он имеет возможность лично повлиять на активность респондентов, убедить их объективно ответить на предлагаемые анкетой вопросы.

По степени охвата выборочной совокупности выделяют:

* индивидуальный порос, не предусматривающий общности места и времени при заполнении анкет и предполагающий индивидуальный способ ответов на вопросы (на рабочих местах, по месту жительства и т. д.);

* групповой опрос, предполагающий одновременный опрос нескольких респондентов, собранных вместе в аудиториях, помещениях.

По степени охвата генеральной совокупности различают:

* выборочные опросы, в которых принимают участие отдельные носители социальной информации о социальном объекте, отобранные с помощью специальных приемов по значимым социально-демографическим характеристикам из всей совокупности носителей данной информации;

* сплошные опросы, при которых опрашиваются все без исключения носители социальной информации по данной проблеме.

Центральной проблемой анкетного опроса является проблема формулировки вопросов, на которые предлагается ответить опрашиваемым. Для грамотного построения вопросов важно соблюдать следующие основные требования :

* вопрос должен соответствовать тому индикатору или операциональному понятию, который он описывает и измеряет;

* каждый вопрос должен однозначно трактоваться респондентом;

* вопрос должен быть сообразован с культурным уровнем отвечающего;

* вопрос должен быть сформулирован нейтрально;

* вопрос не должен заключать в себе несколько вопросов;

* длина высказывания (текст вопроса) не должна превышать 10-12 слов.

Структура анкеты состоит из следующих элементов (блоков).

1. Обращение . В обращении в доброжелательной и лаконичной форме излагаются цели исследования, показывается их важность и значимость как для практики, так и для научного исследования, Главная задача обращения - сформировать у респондента положительную мотивацию на добросовестную работу с анкетой.

2. Инструкция по заполнению анкеты. Это своего рода памятка, руководство по работе с анкетой и различными видами вопросов.

Заканчиваться анкета должна словами благодарности за участие в работе и пожеланием успехов.

Определение последовательности вопросов в анкете - один из важных методических и процедурных моментов. В практике социологических исследований широкое распространение получило т.н. правило «зеркальной воронки» , согласно которому подготовка респондента к наиболее важным вопросам происходит при помощи размещения в начале анкеты вопросов наиболее общего характера, которые постепенно усложняются. В середине анкеты следует располагать наиболее важные вопросы с точки зрения исследования и трудные для ответов респондентов. После того, как все сложные вопросы заданы, целесообразно вновь постепенно «упрощать» вопросы. В заключении анкеты размещаются наиболее простые для восприятия вопросы, связанные, как правило, с социально-демографическими и должностными характеристиками респондента.

Среди основных достоинств метода анкетирования можно выделить, прежде всего, быстроту и экономичность данного метода, возможность охвата исследованием одновременно большой совокупности опрашиваемых.

Вместе с тем, применение данного метода имеет и ряд ограничений : данные опросов выражают субъективное мнение опрошенных; во многом зависят от формы и процедуры проведения исследования; значительное влияние на респондента анкетера-исследователя.

2. Интервью . Интервью можно определить как целенаправленную, непосредственную беседу исследователя (интервьюера) и респондента; это опрос «лицом к лицу», проводимый специалистом-интервьюером по отдельному плану.

В практике социологического исследования используется два основных вида интервью :

Þ стандартизированное (формализованное), в котором формулировки вопроса и их последовательность определены заранее, они одинаковы для всех опрашиваемых. Интервьюеру не разрешается переформулировать какие-либо вопросы или вводить новые, а также изменять их порядок;

Þ нестандартизированное (неформализованное), которое, напротив, характеризуется полной гибкостью и варьируется в широких пределах. Интервьюер, который руководствуется лишь общим планом интервью, имеет право сам в соответствии с конкретной ситуацией формулировать вопросы и изменять порядок пунктов плана.

Каждому из названных видов интервью свойственны свои преимущества и недостатки. К недостаткам стандартизированного интервью можно отнести: возможность ошибок вследствие неоднозначного понимания различными людьми тех или иных слов в поставленных вопросах; несколько «формальный» характер опроса, затрудняющий хороший психологический контакт между интервьюером и респондентом, а также не допускающий уточняющих, дополнительных вопросов.

Основной недостаток нестандартизированного интервью состоит в том, что порой трудно сопоставить полученные данные вследствие вариаций либо даже ошибок в формулировках вопросов и их последовательности.

Выбор исследователем того или иного вида интервью зависит от уровня изученности проблематики, целей исследования и его программы. Применение стандартизированного интервью целесообразно в том случае, когда необходимо опросить большое количество респондентов (от нескольких сотен до тысяч) и затем подвергнуть данные статистической обработке. Нестандартизированное интервью очень часто используется как дополнительное, уточняющее средство сбора социологических данных.

Главная сложность при проведении интервью - специальная подготовка интервьюера, наличие у него знаний, умений и навыков, позволяющих вести беседу в том русле, которое требуется по теме исследования. Интервьюер должен владеть навыками установления контакта с респонедентами, четкого и ясного изложения вопросов, уметь провести беседу в заинтересованном и доброжелательном тоне. Важно, чтобы интервьюер постоянно сохранял нейтральную позицию в процессе интервью. После того как интервьюер задал опрашиваемому все необходимые вопросы, следует обязательно поблагодарить его за сотрудничество.

Существует ряд способов регистрации данных интервью.

· Дословная запись. При этом желательно знание стенографии. В противном случае необходимо дописывать ответы по окончании интервью как можно быстрее.

· Запись по памяти. Если вопросы касаются очень острых или интимных тем, то сам факт какой-либо фиксации ответов может вызвать определенные психологические барьеры в общении. В таких случаях рекомендуется записывать ответы по окончании интервью. Однако запись по памяти влечет за собой значительные потери и искажения информации.

· Аудио- и видеозапись, когда весь ход интервью фиксируется с помощью специальных устройств (видеокамера, диктофон, магнитофон).

· Кодирование. Этот способ заключается в кодировании ответов опрашиваемых на определенные вопросы, исходя из заранее предусмотренных категорий.

Существует ряд распространенных ошибок интервьюеров , которых следует избегать. К их числу можно отнести следующие:

1. Высказывание интервьюером своего личного отношения или мнения по предложенному вопросу.

2. Чрезмерная активность интервьюера, которая может выражаться в использовании слишком большого числа вопросов, постоянных прерываниях ответов респондента.

3. Ограничение ответов только теми областями, которые обозначены в вопроснике.

4. Быстрый переход от одного вопроса к другому, при котором интервьюер, стремясь к полному охвату всех тем, предусмотренных в вопроснике, жертвует глубиной ответов респондента.

3. Экспертный опрос . Особенностью данного вида опроса является то, что в качестве респондентов в опросе участвуют высококвалифицированные специалисты в определенной сфере.

Все разновидности методов экспертного опроса (экспертные методики) можно свести к двум большим группам. Во-первых, это методики очного опроса и, во-вторых, это методики заочного опроса экспертов. К первой группе относят свободное интервью, «мозговую атаку», обмен мнениями (дискуссию), а ко второй – формализованный опрос, методики сбора мнений (почтовый опрос, телефонное интервью, опрос через электронные средства связи и коммуникации). Особняком стоит «дельфийская техника» проведения опроса.

Опросы экспертов, независимо от экспертных методик, могут проводиться однократно и многократно, анонимно и не анонимно.

Большинство перечисленных экспертных методик заочного опроса экспертов основывается на соответствующих методиках массового опроса, рассмотренных выше, но необходимо учитывать особенности их применения для опроса экспертов:

желательно, чтобы специалисты имели возможность излагать свое мнение в развернутой форме и по существу заданных вопросов; в связи с этим количество вопросов должно быть ограничено;

при экспертном опросе не принято использовать «вопросы-ловушки», косвенные и контрольные вопросы, так как они снижают качество экспертных оценок;

поскольку экспертный опрос подразумевает активное вовлечение респондентов в работу, рекомендуется не делать его анонимным;

если при проведении массовых опросов не устанавливаются жесткие требования к уровню подготовки анкетера в той области, которой опрос посвящен, то здесь нужны хорошо подготовленные, грамотные и тактичные специалисты, обладающими достаточными знаниями о предмете опроса и высокой культурой общения.

Методика очного опроса экспертов

Методика обмена мнениями (дискуссия) – одна из наиболее известных и распространенных методик, предполагающих выработку коллективного мнения путем обсуждения экспертами одной или нескольких конкретных проблем. Процедура дискуссии включает три основных этапа:

подготовительный – формулировка проблемы дискуссии, подбор и оповещение экспертов, подготовка руководителя, подготовка помещения;

обсуждение проблемы – постановка проблемы и её обсуждение;

заключительный – выработка согласованного решения, предложений и рекомендаций.

Центральная фигура дискуссии – её ведущий. Он выносит проблему на обсуждение, обеспечивает возможность свободного выражения мнений, удерживает выступающих в рамках обсуждаемой проблемы, фиксирует и обобщает все поступившие предложения. Итогом дискуссии является совместно выработанное экспертами решение.

Мозговой штурм . При применении этого метода происходит распределение ролей между группами экспертов. Одна группа выступает в качестве «генераторов идей», вторая - в роли аналитиков. Задачей первой группы является выдвижение самых разных, порой кажущихся нелепыми, подходов к решению проблемы. Затем группа аналитиков проводит тщательный анализ всех высказанных мнений. Обсуждение, как правило, проводится в несколько этапов, хотя может быть и один этап. В помощь ведущему может выделена группа экспертов, которая будет заниматься отбором наиболее значимых и оригинальных идей.

Дельфийская техника – многократное проведение заочных опросов.

После каждого этапа ответы анализируют, результаты анализа обобщают и доводят до сведения экспертов. При каждом последующем опросе эксперты или соглашаются с мнением большинства или же высказывают особую точку зрения. Таким путем достигают согласования позиций всех экспертов.

Помимо выражения мнения в открытой форме, работа экспертов сводится к следующим основным процедурам: классификации, шкалированию и оцениванию.

Классификация представляет собой разделение различных объектов по каким-либо признакам.

Шкалирование – это упорядочение изучаемых объектов по степени проявления их свойств.

Оценивание заключается в определении степени предпочтения экспертов к каждому из ряда предложенных признаков.

Экспертиза может также осуществляться способом попарного сравнения или последовательного отбора .

В случае попарного сравнения список суждений, объектов разбивается на пары. Эксперт выбирает по одному варианту в паре, из которого выбирает новый список. Далее процедура повторяется до тех пор, пока не останется нужное исследователю количество суждений (объектов).

В случае последовательного отбора эксперт просматривает список целиком и выбирает устраивающие его варианты.

Успех проведения экспертного опроса напрямую зависит от решения проблемы формирования экспертных групп. Необходимо отметить, что численность и представительность группы определяется качественными параметрами. В некоторых случаях мнение некоторых экспертов может оказаться вполне обоснованным и достоверным. Поэтому при определении численности экспертной группы следует руководствоваться следующими правилами:

в методике свободного интервью опрашивается 10 – 15 человек;

в методике «круглого стола», «обмена мнениями» оптимальное число экспертов составляет 20 – 25 человек;

при использовании метода формализованного опроса можно опросить 30 и более человек.

Отбор экспертов в группы осуществляется различными методами. Это – метод документального критерия, методы самооценки и взаимного оценивания экспертов.

В основе метода документального критерия лежит изучение социально-демографических данных специалистов.

Метод самооценки предполагает оценку каждым из специалистов уровня своей компетенции, как правило, по трем позициям: уровень знания проблемы, опыт практической работы, способность к прогнозу. Для оценивания используются 5-ти или 10-ти балльные шкалы. На основе полученных самооценок рассчитываются коэффициенты компетенции по формуле: .

Метод взаимного оценивания экспертов применяется при условии знания экспертами профессионального мастерства друг друга. Разновидностью этого метода является метод «снежного кома», который подразумевает, что несколько специалистов, отобранных на первой стадии, рекомендуют новых специалистов и т.д. Отбор прекращается тогда, когда накапливается 95% повторений.

Качество экспертизы зависит не только от квалификации экспертов, но и от степени учета исследователям целого ряда факторов, таких как степени загруженности экспертов; характера выводов, которые могут быть сделаны по результатам исследования; подверженности эксперта внешнему влиянию.

В заключение следует отметить, что метод экспертного опроса, при всей трудоемкости его организации и проведения, позволяет получить интересные данные, нестандартные, подчас новаторские идеи, определить новые подходы к решению социальных и исследовательских проблем.

2.5.3. Виды анализа документов

Виды (методы) анализа документов очень разнообразны. Все существующие методы Андреева (1, с.78) предлагает разделить на две группы: традиционные и формальные. В свою очередь в каждой из этих групп можно вычленить особые подразделы.

Таким образом, можно выделить два основных вида анализа документов: традиционный (классический, качественный, неформализованный) и формализованный (количественный, контент-анализ). Хотя между ними существуют различия, они все же не исключают друг друга, а дополняют, и это связано с тем, что цель у них одна - получить надежную и достоверную информацию.

2.5.3.1. Традиционный анализ

Использование интуиции, общего уровня культуры и практической ориентации исследователя играют важную роль при анализе документов. Но проведение анализа документов, основанного только на подобного рода традиционных методах, в настоящее время у многих, и часто вполне обоснованно, вызывает скепсис и настороженность. Поэтому в ряде конкретных общественных наук уже давно идет поиск и развитие других, хотя тоже традиционных, но более специализированных методов изучения документов (1, с.79).

Все, кто читают документы, делают качественный анализ. Каждый раскрывает содержание документа, прослеживая мысль автора. Но уровень постижения содержания у всех разный. Читатель, более подготовленный в научном отношении, лучше поймет его. Специалист по данной проблеме еще лучше осознает смысл документа, а в тонкостях текста и содержания, естественно, лучше всего разберется специалист более высокого класса. Но в любом из этих вариантов очень большое значение имеет уровень подготовки читателя в области работы с документами и свободное владение техникой этого дела.

Некоторые виды документов в силу своей специфики требуют специальных методов анализа, поэтому для проведения необходимого анализа порой необходимо привлечение специалистов данных областей знания.

В отличие от простого ознакомления с документом или прочтения его с целью получения нового знания, традиционный специальный анализ документов является именно методом исследования, которое, как и любое другое научное исследование, предполагает выдвижение определенных гипотез, тщательное изучение содержания анализируемого материала, логики текста, обоснованности и достоверности приводимых сведений.

Остановимся кратко на некоторых специальных методах анализа документов (33, с.325-326).

Исторический метод . Решает проблему валидности в трех аспектах:

Подлинность текста и установление его автора. Исследователь должен убедиться в том, что изучаемый документ является именно тем, каким он его принимает, и в действительности принадлежит давно жившему автору. Подобного рода подлинность может быть установлена по разным характеристикам текста: материальным признакам (бумага, чернила и т.д.), признакам формы (стиль, тон, словарь) и т.д.

Правдивость фактов изложения в тексте.

Валидность интерпретации текста, его значение по отношению к автору текста, по характеру, целям, которые он преследует.

Выяснения подлинности и правдивости текста особенно важны для исторического метода. Следует отметить, что данный метод может применяться и при изучении юридического или литературного текста.

Литературный метод выявляет подлинность текста и автора путем изучения тона, стиля и словаря. С помощью его устанавливается, например, что такой-то писатель не мог быть автором определенного произведения.

Юридический метод используется при изучении всех видов юридических документов. Он дает возможность определить правомочность документа, сравнивать тексты, исследовать мотивы решения, цели законодателя и т.д. Специфика данного метода заключается в том, что в правовой науке разработан особый словарь терминов, в котором значение каждого слова строго однозначно определено. Поэтому при анализе юридических документов незнание юридического словаря может привести исследователя к грубым ошибками и искажению полученной информации.

Психологический метод - наиболее индивидуален, и, как правило, применяется при рассмотрении личных документов. Он позволяет исследовать психологические особенности как самого автора, так и изображаемого им, соотносить изображенных героев с социальной средой, породившей их. Объяснение будет зависеть от школы, к которой принадлежит исследователь (психоаналитическое, экзистенциалистское и т.д.).

Социологический метод - объясняет документ в его социальном контексте, подвергая анализу социально значимую информацию.

Лингвистический метод заключается в выявлении минимальных единиц языковой системы (фонемы и морфемы), а также в исследовании сочетаний и последовательности этих единиц. Главное для линг­виста не значение текста, а его структура. Он обращает внимание на присутствие или отсутствие определенных лингвистических единиц, а также как часто они употребляются.

Все классические методы (кроме лингвистического анализа документов) имеют много общего. В определенной степени они интуитивные, личные, субъективные, хотя могут быть и рациональными (юридический анализ документов).

Традиционный анализ часто выступает предпосылкой для формализованного изучения документов. Как отмечают авторы "Рабочей книги социолога", "под традиционным, классическим анализом понимается все многообразие умственных операций, направленных на интерпретацию сведений, содержащихся в документе, с определенной точки зрения, принятой исследователем в каждом конкретном случае" (34, с.289). То есть традиционный анализ основан на восприятии, понимании, осмыслении и интерпретации содержания документа в соответствии с целью исследования. Традиционный анализ представляет из себя цепочку логических, умственных построений, направленных на выявление сути анализируемых документов. Он помогает исследователю уловить основные идеи и мысли материала, проследить их развитие, выяснить логику их обоснования и оценить последствия.

Необходимость проведения такого вида анализа связана с тем, что большинство документов не предназначено специально для исследовательских целей социологии. Так как документы создаются с другими целями: общественными, ведомственными, личными, то от исследователя требуется переосмыслить их содержание для того, чтобы можно было извлечь необходимую информацию. Таким образом, проведение традиционного анализа приводит к преобразованию первоначальной формы информации в нужную исследовательскую форму. Особое значение в качестве самостоятельного метода традиционный анализ приобретает при изучении уникальных документов, число которых всегда невелико и поэтому не возникает необходимости проводить количественную обработку информации. Он позволяет охватить самые глубинные, скрытые стороны содержания изучаемого документа, напримерю проследить политическую, гражданскую позицию автора, обнаружить возможные "умолчания" или оценить своеобразие авторского языка и стиля изложения.

Традиционный анализ бывает внешним и внутренним .

Внешний - это анализ "исторического контекста" документа и всех сопутствующих его появлению обстоятельств. При проведении внешнего анализа определяется вид документа, время и место появления, идеологическая, психологическая ситуации, цель его создания, выясняются данные об авторе, возможная тенденциозность документа, каков его контекст, обнаруживаются содержащиеся в нем ошибки и искажения фактов.

Внутренний - это уже исследование непосредственно содержания документа. Исследователь выявляет различия между фактическим и литературным содержанием, устанавливает уровень компетентности автора документа в делах, которые он описывает, выясняет личное отношение автора к описываемым в документе фактам, а самое главное, систематизирует и интерпретирует имеющие место в документе фактические сведения.

Следует отметить, что на первом этапе исследования осуществляется внешний анализ, а на втором - внутренний.

"Что представляет собой документ? (Задаваясь этим вопросом, следует обратить внимание на вид, форму документа, решить, потребует ли его анализ применения каких-либо специальных методов и т.п.)

Каковы цели, с которыми был создан документ?

Какова надежность самого документа?

Какова достоверность зафиксированных в нем данных?

Каково общественное действия, общественный резонанс документа? (Этот вопрос вытекает из того обстоятельства, что документы могут представлять собой только свидетельства о каких-либо общественных явлениях, например записки политического деятеля о событиях, а могут и сами быть этими явлениями, например публичное выступление того же политического деятеля.)

Каково оценочное содержание документа? (Результатом ответа на этот вопрос должна быть полная ясность относительно того, что именно в документе можно считать выражением оценок мотивов, установок - вообще ценностных представлений, получивших в нем отражение.)

Какие выводы можно сделать о фактах, содержащихся в документе?

Какие выводы можно сделать об оценочных установках, содержащихся в документе? (Деление на фактическое и оценочное содержание документа (кроме различной направленности исследования) имеет смысл потому, что независимо от добросовестности исследования выводы о фактах всегда значительно более объективны, чем выводы о ценностных представлениях.)

Какие выводы можно сделать относительно автора документа? Этим вопросом задаются далеко не всегда, а лишь в тех случаях, когда целью исследования является получение представления о личности автора, о ценностных представлениях социальной среды или эпохи, к которым принадлежит автор.

Достаточно ли полны сведения, содержащиеся в проанализированном документе, насколько эти сведения отвечают целям исследования, есть ли необходимость привлекать для дальнейшей работы дополнительный материал?" (34, с.290-291).

При проведении исследования перечисленные выше вопросы можно использовать в качестве примерного ориентира для постановки более конкретных вопросов.

Традиционный анализ является интенсивным. Недостатком его можно назвать то, что ему присущ субъективизм. Традиционные, классические методы анализа в значительной степени основаны на интуиции исследователя, поэтому для них характерна потенциальная возможность субъективных смещений в восприятии и интерпретации содержания документов. Каким бы добросовестным не был исследователь и как бы не старался максимально беспристрастно рассмотреть материал, сделанная им интерпретация всегда будет в большей или меньшей степени субъективной. Причиной этого могут быть: психологические особенности исследователя (устойчивость внимания, памяти, утомляемость); наличие определенных установок, интересов, сложившихся стереотипных представлений о предмете анализа; предубеждения или симпатии исследователя к автору (например, выделение "приятных" и пропуск "неприятных" аспектов); методологическая позиция исследователя (например, исследователи разных мировоззренческих взглядов при объяснении конкретного явления могут признать существенными два разных факта); личная компетентность; уровень его творческих возможностей и т.д.

С увеличением числа анализируемых документов и объема их содержания существенным образом возрастает возможность и опасность подобного рода субъективных смещений. Исследователь часто может это даже и не осознавать. А так как не существует определенных строгих критериев для обнаружения подобного рода субъективных смещений при интуитивном, понимающем анализе, то как альтернатива ему возник формализованный анализ. Методики формализованного анализа, основанные на статистическом учете различных объективных характеристик текста, позволяют преодолеть отмеченный недостаток.

Анализ документов - один из широко применяемых и эффективных методов сбора первичной информации. Отражая духовную и материальную жизнь общества, документы передают не только событийную, фактологическую сторону социальной действительности, но и фиксируют развитие всех выразительных средств, и прежде всего структуру языка.

С документами социолог сталкивается в самом начале абсолютного большинства исследований независимо от того, какими методами предстоит собирать первичную информацию. На этой стадии документы, как правило, представляют собой не объект самостоятельного социологического исследования, а лишь вспомогательный источник информации. Такую функцию могут выполнять четыре группы документов: статистические и вербальные документы об объекте исследования, массивы первичной статистической информации, протоколы и стенограммы, документы личного характера.

В плане вспомогательном источники информации об объекте исследования - это прежде всего документы, содержащие либо статистические сведения о нем, либо его вербальную характеристику; данные предшествующих социологических исследований на аналогичную тему; аналитические отчеты и другие материалы, способные дать информацию для более глубокого уяснения исследуемой проблемы, повышения качества методического инструментария, точности модели выборки; служить основой формирования выборочной совокупности. Источниками подобной документации могут быть органы государственной и ведомственной статистики, различные справочные издания, документы, хранящиеся в архивах, библиотеках и др. Сведения, содержащиеся в этих источниках, могут быть также использованы для проверки устойчивости информации, полученной в результате социологического исследования, для сопоставления, сравнения, либо построения динамических рядов распределения данных.

Массивы первичной статистической информации или статистической отчетности хранятся как в официальных статистических управлениях, так и в различных ведомствах и учреждениях. Это бланки со стандартизованной отраслевой информацией, ежеквартальные и годовые отчеты предприятий в налоговой инспекции, годовые балансы банков; данные о здоровье населения, хранящиеся в медицинских учреждениях; документы по учету преступлений, хранящиеся в правоохранительных органах, и т.д. За исключением «санкционированных» случаев (когда исследования заказаны собственниками соответствующих документов, либо иными организациями, имеющими к ним доступ) такие документы труднодоступны исследователю.

Протоколы и стенограммы судебных или арбитражных заседаний, расследований, собраний, индивидуальные характеристики школьных психологов на учащихся и другие аналогичные документы могут служить источником тематических зондажей.

Для репрезентативных исследований из-за ограниченности массива документов они, как правило, не пригодны. Кроме того, эти документы не всегда доступны исследователю ввиду своей конфиденциальности.

Используемые в зондажных целях личные документы - письма, дневники, автобиографии и т.д. - также не всегда могут составить репрезентативный массив для полномасштабного исследования. К тому же доступ к личным документам затруднен не в меньшей степени, чем к протоколам и стенограммам.

Наряду с решением вспомогательных задач - сбор сведений об объекте, предмете исследования, уточнение модели выборки, методического инструментария сбора информации - документы могут составить источниковую основу самостоятельного социологического исследования. Анализ документов как поисковый научный метод лежит в основе двух видов исследования: количественного семантического анализа и главного метода, используемого в прикладной социологии - анализа содержания документов. Прежде чем перейти к его детальному рассмотрению, ознакомимся в общих чертах с методом количественного семантического анализа.

Виды Прикладная социология в первую очередь рас-

документов сматривает различные печатные и рукописные материалы, созданные для хранения и передачи информации. При более широком подходе в состав документов включают также теле-, кино-, фотоматериалы, звуковые записи и т. д.

Существует ряд оснований для классификации документов. По статусу различают документы официальные и неофициальные; по форме изложения - письменные и (более широко - вербальные), аудиальные, визуальные, аудио-визуальные и статистические. По своим функциональным особенностям документы разделяются на информационные, регулятивные, коммуникативные и культурно-просветительские. Естественно, при этом подчеркивается основная, ведущая направленность документа, однако чаще всего он выполняет одновременно несколько функций.

Принципиальное значение для исследователя имеют официальные документы - постановления правительственных органов, директивы ведомств, приказы и распоряжения администрации предприятий и учреждений, которые преимущественно отражают общественные связи и выражают коллективные точки зрения. Они составляются и утверждаются государственными или общественными органами, коллективными или частными учреждениями и могут выступать в качестве юридического доказательства. Ведущее назначение этих документов - управленческое. Их основная функция - информировать о состоянии дел, о достижении определенных намеченных целей.

Полезная информация для систематизированного изучения и статистического обобщения контроля за деятельностью организаций содержится в текущих планах работы. Анализ этих материалов в динамике позволяет выявить роль различных управленческих акций в организации производства, обнаружить и исправить имеющиеся трудности, недостатки в работе. Ведущее назначение такого рода документов - коммуникативное и культурное, но при этом они информируют членов коллектива и регулируют отношения между ними.

Большую пользу может принести изучение неофициальных документов. Среди них выделяются личные документы. Они весьма ценны, поскольку представляют собой почти ничем не ограниченные высказывания людей по свободно выбранной теме. Личные документы - дневники, мемуары, письма, семейные фото- и кинодокументы, архивы и т.д. - незаменимый источник изучения общественного сознания, мнений и установок на индивидуальном уровне. Они позволяют вскрывать глубинные социальные механизмы образования ценностных ориентаций, понять историческую обусловленность мотивов поведения, найти основу для выделения социальных типов личности. Особое значение имеют письма населения в различные властные организации, в редакции средств массовой информации.

Важнейший источник документальной информации - материалы прессы, отражающие все стороны жизни общества. Публикации газет синтезируют в себе черты документов различных типов: «словесную», цифровую и изобразительную информацию, официальные сообщения, авторские выступления и письма граждан, документы истории и репортажные материалы о современности.

Многое может сказать об эффективности газетных выступлений изучение языка публикаций. Так, по данным исследования, проведенного в рамках проекта «Общественное мнение», до 70% читателей газеты «Таганрогская правда» неправильно интерпретировали содержащиеся в публикациях на экономическую тематику ключевые понятия: от 50% до 80% читателей продемонстрировали полное незнание или ошибочное истолкование таких слов, как: «демократ», «монополия», «реванш», «либерал», «эскалация» и др. А ведь это - понятия, наиболее часто встречавшиеся в выступлениях внешнеполитических обозревателей центральных газет, радио и телевидения.

Еще одно основание для типологии документов - их целевое назначение. Выделяют документы, созданные независимо от исследователя, и документы, «целевые», то есть подготовленные в точном соответствии с программой и задачами социологического обследования. К первой группе, естественно, относятся все документы, существование которых ни прямо, ни косвенно не обусловлено техникой проведения социологического исследования (связанные с темой исследования официальные документы, статистические сведения, материалы прессы, личная переписка и т. д.). Вторая группа документов включает: ответы на открытые вопросы анкеты и тексты интервью, записи наблюдений, отражающих мнение и поведение респондентов; справки официальных и общественных организаций, выполненные по инициативе, заказу исследователей; статистическую или вербальную информацию, собранную и обобщенную в ориентации на определенное социологическое исследование.

Информацию, содержащуюся в документах, принято разделять на первичную и вторичную. В первом случае речь идет об описании конкретных ситуаций, об освещении деятельности отдельных лиц или органов. Вторичная информация носит более обобщенный, аналитический характер, в ней, как правило, отражены более глубокие социальные связи.

Самостоятельные этапы анализа документов - Отбор отбор источников информации и комплектова-

документов ние выборочной совокупности подлежащих для изуче- анализу материалов. Опорой для этих этапов служит программа исследования.

Как подойти к отбору массива документов для анализа? Прежде всего принимают во внимание качественный и количественный аспекты процедуры построения выборки.

Количественная сторона выборки определяется в первую очередь материально-техническими возможностями и организационными условиями деятельности исследовательской группы. Если к отбору и анализу документов можно привлечь достаточно опытных, обученных специалистов, если сроки проведения исследования не требуют оперативного осуществления всех работ, а для обработки первичной информации могут быть использованы современные вычислительные средства, то, несомненно, надо повысить разнообразие источников информации и увеличить объем выборочной совокупности. На практике, однако, чаще приходится думать об обратном, то есть о путях сокращения количества изучаемых материалов. Общий принцип решения этой задачи один - конкретизация, уточнение целей анализа документов.

Исследователь не имеет права поддаться магии слова «документ». Ни печать, ни подписи на нем не гарантируют надежности документальной информации. За текстом всегда стоят люди и их интересы, их сила и слабости всегда отражаются в содержании документа. Поэтому приступая к работе, определяют надежность самого документа и достоверность его содержания. Речь идет, во-первых, о подлинности источника и его связи с предметом исследования и во-вторых - о правдивости в освещении фактов, точности в передаче автором описываемых им событий.

Бывает так, что случайные ошибки снижают достоверность всего документа или отдельных его разделов: неверное указание дат и имен, опечатка в приводимом статистическом материале, непреднамеренное «опущение» ряда важных деталей и т.д.

Существуют также обстоятельства систематического характера, отрицательно сказывающиеся на качестве документальной информации, например, неправильная методика группировки при составлении статистических документов.

Широко используемое средство, позволяющее проверить надежность, достоверность информации и одновременно исследовать содержание документов, - «внешний» и «внутренний» анализ. Внешний анализ состоит в изучении обстоятельств возникновения документа, его исторического, социального контекста. Зная истинное положение дел в соответствующей сфере жизни общества, конкретных областях, в регионах страны, будучи знакомым с традициями разных социальных групп населения, социолог легко обнаружит тенденциозность в освещении отдельных проблем, поднимаемых некоторыми авторами документов. Внутренний анализ - это и есть собственно изучение содержания документа, всего того, о чем свидетельствует текст источника, и тех объективных процессов и явлений, о которых он сообщает.

Виды Во всем многообразии исследовательских при-

анализа емов, используемых при изучении документов,

докуМентов выделяются два основных вида: качественный анализ (иногда его называют традиционным) и формализованный, носящий название контент-анализа. Эти два во многом различных подхода к изучению документальной информации могут, тем не менее, дополнять друг друга.

Качественный анализ зачастую служит предпосылкой последующего формализованного изучения документов. Как самостоятельный метод он приобретает особое значение при изучении уникальных документов: их число всегда невелико и поэтому нет надобности в количественной обработке информации. На первый план в таких случаях выдвигаются углубленное логическое исследование содержания документа, обнаружение возможных «умолчаний», оценка своеобразия авторского языка и стиля изложения.

Стремление в максимальной степени избежать субъективизма, потребность в социологическом изучении и обобщении большого объема информации, ориентация на использование современной вычислительной техники при обработке содержания текстов привели к становлению метода формализованного, качественно-количественного изучения документов (контент-анализа).

Согласно этому методу, содержание текста определяется как совокупность имеющихся в нем сведений, оценок, объединенных в некую целостность единой концепцией, замыслом. Формализованный анализ документов имеет дело с текстом, но ориентирован прежде всего на изучение стоящей за ним реальности. Особо подчеркнем, что внетекстовой реальностью являются не только события, факты, человеческие отношения, отраженные в текстах, но и используемые при их подготовке принципы отбора материалов. Другими словами, для исследователя может быть в равной степени важно и то, что вошло в содержание текста, и то, что оказалось вне его рамок.Процедура формализованного изучения документов начинается с выделения двух единиц анализа: смысловых (качественных) и единиц счета. При этом главной смысловой единицей должна быть социальная идея, социально-значимая тема, отображенная в операциональных понятиях. В тексте она выражается по-разному: словом, сочетанием слов, описанием. Цель исследования - отыскать индикаторы, указывающие на наличие в документе темы, значимой для анализа, и раскрывающие содержание текстовой информации. К примеру, при изучении роли газеты в распространении технических знаний к публикациям на эту тему могут быть отнесены статьи, очерки, заметки, фотографии, в которых прямо или косвенно, с различной степенью достоверности говорится о новых достижениях в области техники и технологии.

Плодотворным оказывается при анализе текстов деятельностный (проблемный) подход. В этом случае весь текст или его часть рассматриваются как описание конкретной проблемной ситуации, в которой есть свои «действующие лица» и рассказано об отношениях между ними. При формализованном анализе документов всесторонне рассматривают саму деятельность, а также выделяют ее субъекты, цели и мотивы совершаемых ими поступков, обстоятельства, причины, породившие потребность в той или иной деятельности (бездеятельность - это тоже вид деятельности); объект ее направления. Подобное «проблемное» прочтение содержания совокупности писем населения или газетных публикаций способствует преодолению многих трудностей, вызываемых разнообразием излагаемых в них ситуаций и языковых средств, используемых различными авторами. При соотнесении содержания текстов с социально-демографическими характеристиками и словарным багажом их авторов описанный прием анализа документов открывает самые широкие и благоприятные возможности для применения ЭВМ, позволяет получить интересные содержательные выводы о явлениях, процессах, отраженных в документах.

Обязательный инструментарий осуществления формализованного анализа документов - бланк кодировки. Он составляется в соответствии со схемой операциональных понятий, содержит единицы анализа и все элементы описания проблемной ситуации, устанавливает однозначное соответствие между лексикой текста и кодами, над которыми производятся вычислительные операции.

В качестве примера приведем фрагмент бланка, с помощью которого можно осуществить кодирование информации, содержащейся в письме: