Проблема достоверности документальной информации

Принципиально важно перед началом анализа документов составить себе представление о том, насколько имеющиеся документы полны, адекватны, надежны. Весьма полезно найти ответ на вопросы о том, кем составлялся документ, при каких условиях (например, по следам событий, на основании воспоминаний, своих или чужих, с какой целью он составлялся?)

Не следует смешивать надежность, подлинность самого документа с достоверностью сообщаемых в нем сведений.

Достоверность информации в первую очередь зависит от источника доступного документа. Разные источники обладают своего рода заведомой степенью достоверности сообщаемых сведений. Во всех случаях первичные данные надежнее вторичных. Поэтому официальный личный документ, полученный из первых рук, более надежен и достоверен, чем неофициальный, безличный и к тому же составленный на основе других документов.

При использовании вторичных документов важно установить их первоисточник. Это можно делать выборочно, с тем, чтобы оценить общую погрешность вторичных материалов.

Целевые документы, запланированные исследователем, будут надежны в случае, если предусмотрены обычные операции контроля: поиск независимого источника информации (для выборочного контроля), вторичные обращения к тому же источнику (устойчивость данных), тесты по известным группам.

Если документ содержит статистическую группировку данных, следует в первую очередь выявить основание классификации. В соответствии с целью исследования возможны перегруппировки данных по иным основаниям.

Наконец, чрезвычайно важно хорошо уяснить обстановку, в которой составлялся документ: располагала ли она к объективности (независимо от целевых намерений автора) или диктовала смещение информации в какую-то сторону?

Документалисты-историки и психологи выработали немало приемов, с помощью которых определяют степень достоверности сведений, судя по самому содержанию документальной информации.

Проверка подлинности документа, анализ мотивов, побуждений, условий его составления, целевой установки автора, ситуации, в которой он действовал, характера его окружения – вот те факторы, от которых зависит достоверность информации из личных документов.

Первое «золотое правило» в работе с документами (да и вообще со всякой информацией) – четко различать описания событий и их оценку. Мнения и оценки потенциально обладают меньшей достоверностью и надежностью по сравнению с фактуальной информацией.

Преимущества и недостатки метода

1. С помощью документов мы можем получить информацию, которую иными способами получить нельзя.

2. При комбинированном применении с другими методами анализ документов позволяет производить сопоставление информации, дополнить ее.

3. Охват документов за достаточно длительный период может позволить увидеть тенденцию, сделать прогноз.

4. Некоторую информацию с помощью документов можно получить быстрее и эффективнее ее использовать. Например, развитие капитализма в России.

К недостаткам метода относят:

- его трудоемкость;

- проблематичность некоторого вида источников;

- документы относятся к прошлому и поэтому не всегда пригодны (например, переписи населения, списки избирателей), ибо содержащаяся в них информация устаревает.

Основные этапы и требования к применению
метода анализа документов в социологических исследованиях

1. Исследовательские функции изучения документов.

Прежде всего, нужно точно определиться, на каком этапе исследования и для достижения каких целей будет использоваться анализ документов. Анализ документов может выполнять различные функции в решении проблемы и реализации исследовательского проекта. Рассмотрим эти функции.

1.1. Разведывательная функция анализа документов. Такую функцию анализ документов выполняет тогда, когда исследователю не ясна до конца проблема, у него нет четкого представления о характере той стороны социальной действительности, которую ему предстоит изучать. Здесь анализ документов может дать толчок для формулирования проблемы, классификации явлений, определить те социальные объекты, которые наиболее важны с точки зрения решения исследовательских задач. Анализ документов помогает прояснить предмет исследования.

1.2. Описательная функция. Здесь анализ документов дает возможность понять и описать степень разработанности проблемы, за решение которой берется исследователь. Это необходимо для того, чтобы не изобретать уже известное и опираться на достигнутое.

1.3. Методологическая функция. После определения предмета исследования анализ документов может помочь уточнить понятийный аппарат, сформулировать гипотезы.

1.4. Методическая функция. Анализ документов помогает сориентироваться в плане формирования репрезентативных групп (например, использование статистических данных о социально-демографической, профессиональной структуре населения).

1.5. Иллюстративная функция. Например, приводятся наиболее яркие высказывания в открытых вопросах.

1.6. Полевая функция реализуется тогда, когда документы служат непосредственным источником первичной информации.

1.7. Оптимизирующая функция. Дополнительный к полученным результатам анализ документов может подсказать, какой из возможных вариантов решения социальной проблемы может оказаться наиболее эффективным (изучение опыта).

2.1. Контент-анализ

При изучении документов выделяются два основных вида исследовательских приемов: качественный анализ, иногда его называют традиционным, и формализованный, носящий название контент-анализа. Два эти подхода к изучению документальной информации хотя и различаются во многом, однако могут дополнять друг друга. Качественный анализ зачастую служит предпосылкой последующего формализованного изучения документов.

При анализе текстовых документов нередко возникает задача извлечения числовой информации из нечисловых источников. Ценность такого анализа заключается в том, что явление, выраженное числом теряет смысл единичности, уникальности, взамен приобретая статус социального факта. А это позволяет осуществлять сравнение, делать более весомые и устойчивые выводы.

Метод количественного анализа содержания письменных документов, теле-, радиопередач и других видов документов и информации путем подсчета некоторых повторяющихся в них элементов (имен, лозунгов, тем и т.п.) называется контент-анализом. В.А. Ядов называет контент-анализом перевод в количественные показатели массовой текстовой (или записанной на пленку) информации с последующей статистической ее обработкой.

При этом методе содержание текста определяется как совокупность имеющихся в нем сведений, оценок, объединенных в некую целостность единой концепцией, замыслом. Формализованный анализ документов имеет дело с текстом, но ориентирован он прежде всего на изучение реальности, стоящей за текстом. Особо подчеркнем, что внетекстовой реальностью являются не только события, факты, человеческие отношения, отраженные в тексте, но и принципы отбора материалов при подготовке текстов. Другими словами, для исследователя может быть в равной степени важно и то, что вошло в содержание текста, и то, что оказалось вне его рамок.

Процедура контент-анализа

Контент-анализ состоит из трех основных этапов:

- определяются единицы анализа и их машиночитаемый вид;

- производится подсчет частоты упоминаний исследуемых переменных, выявляются взаимосвязи между ними, рассчитываются относительные индексы, например, индекс информационного присутствия или пресс-индекс, индекс эмоциональной направленности, индекс активности и другие;

- интерпретация полученных результатов, описание положительных и отрицательных тенденций, прогнозирование.

Контент-анализ начинается с выявления смысловых (качественных) единиц и единиц счета.

В качестве смысловых единиц используют:

- понятия, выраженные в отдельных терминах. Это могут быть понятия из области экономики (формы собственности, приватизация), политики (оппозиция, авторитаризм, демократия), нравственные или правовые символы (гуманизм, права человека, нарушение законности);

- тема, выраженная в целых смысловых абзацах, частях текстов, статьях, радиопередачах и т.п.

- имена исторических личностей, политиков, выдающихся ученых и деятелей искусства. Эти характеристики могут свидетельствовать о влиянии отдельных лиц или представляемых ими групп на общественное мнение. По числу ссылок на отдельных авторов определяют значимость той или иной научной идеи: если число ссылок растет или падает, это свидетельствует о росте или падении авторитета данной концепции. По числу упоминаний общественных движений или их лидеров легко заключить о влиятельности этих движений;

- целостное общественное событие, официальный документ, факт, произведение, случай и т.п. несут специфическую смысловую нагрузку и тоже могут быть приняты за единицу анализа. Частота и длительность (во времени) упоминания общественного события или государственного решения – свидетельство его важности для общества.

Цель исследования – отыскать индикаторы, указывающие на наличие в документе темы, значимой для анализа, и раскрывающие содержание текстовой информации. К примеру, при изучении роли газеты в распространении технических знаний к публикациям на эту тему могут быть отнесены статьи, очерки, заметки, фотографии, в которых прямо или косвенно, с различной степенью достоверности говорится о новых достижениях в области техники и технологии.

Единицы счета могут и совпадать и не совпадать с единицами анализа. В первом случае (когда они совпадают) – это частота упоминания выделенной смысловой единицы по отношению к другим категориям. Во втором случае единицей счета избирают физическую протяженность или площадь текстов, заполненную смысловыми единицами: число строк, абзацев, квадратных миллиметров, знаков, колонок – в печатных текстах; длительность трансляции по радио или телевидению, метраж пленки при магнитофонных записях.

Обязательный инструментарий осуществления контент-анализа – бланк кодировки, который составляется в соответствии со схемой операциональных понятий, содержит единицы анализа и все элементы описания проблемной ситуации, устанавливает однозначное соответствие между лексикой текста и кодами, над которыми производятся вычислительные операции.

Применявшийся вначале для изучения эффективности массовой пропаганды, этот прием стал ныне сильным средством анализа всевозможных официальных и неофициальных документов. Контент-анализ применяют также в практике изучения писем, поступающих в различные организации и органы управления, в политологии, социальной психологии и педагогике, в криминологии, искусствоведении, этнографии и т.д. Использование контент-анализа для всестороннего изучения информации СМИ считается особенно эффективным, т.к. по мнению авторитетных людей, из открытых источников можно получить от 80 до 95% имеющейся информации при сравнительно низкой стоимости ее вычленения. Крайне трудоемкие процедуры обработки данных контент-анализа существенно облегчаются компьютерными программами (они входят в комплект SPSS и имеются в виде специальных разработок). Благодаря расширяющемуся применению персональных компьютеров и введению в их память текстовой информации появилась возможность намного интенсивнее использовать контент-анализ ответов респондентов на открытые вопросы в анкетах. Политологические исследования широко используют эту технику при изучении политических документов, программ общественных движений, видеозаписей массовых собраний, съездов, митингов и т.п.

3. Прямое наблюдение

Наблюдение – метод сбора информации об изучаемом социальном объекте путем непосредственного восприятия и регистрации факторов, касающихся изучаемого объекта и значимых с точки зрения целей исследования.

К такому методу сбора информации прибегают, если данные об исследуемом процессе, о деятельности индивидов, группы, коллектива должны быть максимально «очищены» от рациональных, эмоциональных и прочих свойств респондентов. Наблюдение – общенаучный метод, широко используемый в естествознании, а также в обыденной жизни. Социологическое наблюдение – это всегда направленное, систематическое, непосредственное прослеживание и фиксирование значимых социальных явлений, процессов, событий. Оно служит определенным познавательным целям и может быть подвергнуто контролю и проверке.

Заметим, что не всякое визуальное и/или слуховое восприятие изучаемого объекта является наблюдением в научном понимании. Чтобы превратить его в научный метод, необходимо осуществить следующий ряд исследовательских процедур:

1. Вычленить в программе исследования те задачи и гипотезы, которые будут решаться и обосновываться данными наблюдения.

2. Определить в общей программе исследования или специальной программе наблюдения:

o объект наблюдения (весь коллектив предприятия, отдельная группа его, лидеры забастовочного движения или что-то другое);

o предмет наблюдения, т.е. совокупность интересующих наблюдателя свойств (признаков) объекта (факторов его поведения);

o категории наблюдения, т.е. конкретные признаки из вышеназванной совокупности, которые одновременно отвечают следующим требованиям:

§ они особенно значимы для решения определенных в общей программе исследования задач и гипотез;

§ выражают те операционалистские понятия, которые определены в программе;

§ имеют количественный характер, т.е. могут быть замерены;

o наблюдаемые ситуации, т.е. те, при которых могут проявиться категории наблюдения;

o условия наблюдения, т.е. те требования к ситуации, при наличии которых наблюдение производить можно (или нельзя);

o единицы наблюдения, т.е. те акты поведения наблюдаемых, в которых проявляются категории наблюдения в оговоренных ситуациях при определенных условиях.

3. Подготовить инструментарий наблюдения, т.е.:

o дневник наблюдения, где будут фиксироваться его результаты в закодированной или общепонятной форме, а также действия наблюдателя и реакции наблюдаемых;

o карточки для регистрации единиц наблюдения в строго формализованном и закодированном виде (этих карточек должно быть ровно столько, сколько единиц наблюдения);

o протокол наблюдения – методический документ, обобщающий данные всех карточек и содержащий, как минимум, три оценочных показателя;

§ коэффициент устойчивости наблюдения (КУН), характеризующий совпадение результатов, полученных одним и тем же наблюдателем в различное время;

§ коэффициент согласия наблюдателей (КСН), показывающий степень совпадения данных, полученных одновременно разными наблюдателями в разное время;

o классификатор контент-анализа дневниковых и протокольных записей;

o аудиовизуальные технические средства фиксации единиц наблюдения;

o программу обработки данных наблюдения.

4. Пропилотировать (апробировать) инструментарий, внести в него, если это потребуются, должные коррективы, размножить его в необходимом количестве экземпляров.

5. Составить план и/или сетевой график выполнения наблюдения (кто, где, когда его проводит).

6. Разработать инструкцию наблюдателям, провести их обучение и инструктаж.

7. Осуществить комплекс операций непосредственного наблюдения в полном соответствии с вышеозначенными требованиями и рекомендациями, которые последуют ниже.

Наблюдение имеет ряд преимуществ по сравнению с другими социологическими методами. Главные из них – непосредственная связь исследователя с объектом его изучения, отсутствие опосредствующих звеньев, оперативность получения информации. Важнейшее достоинство метода наблюдения заключается в том, что оно осуществляется одновременно с развитием изучаемых явлений, процессов. Открывается возможность непосредственно воспринимать поведение людей в конкретных условиях и в реальном времени. Эти достоинства, однако, не исключают ряд недостатков. Наблюдатель вольно или невольно влияет на изучаемый процесс, вносит в него что-то такое, что не присуще его природе. Оперативность же оборачивается локальностью, ограниченностью изучаемой ситуации, неспособностью охватить совокупность всех признаков познаваемого явления. Иначе говоря, этот метод весьма субъективен, личностные качества наблюдателя неизбежно сказываются на его результатах. Поэтому, во-первых, последние подлежат обязательной перепроверке другими методами, во-вторых, к поведению наблюдателей предъявляются особые требования.

Характер этих требований зависит, прежде всего, от того, какую разновидность наблюдения они осуществляют. Классификация наблюдений производится по различным основаниям:

· по степени формализованности выделяют стуктурированное (у В.А. Ядова оно является синонимом наблюдения контролируемого) и бесструктурное наблюдения;

· в зависимости от степени участия наблюдателя в исследуемой ситуации, его положения различают включенное (или соучаствующее) и невключенное (простое) наблюдение, подразделяя каждое на скрытое (наблюдение-инкогнито) и открытое;

· по регулярности проведения: систематические и несистематическое (или эпизодические, случайные) наблюдения.

· по месту проведения, условиям организации наблюдения: лабораторное и полевое;

· по степени контроля результатов выделяются контролируемое и неконтролируемое наблюдения.

Структурированному наблюдению свойственны четко формализованные процедуры и инструменты, оно предполагает повышенную способность наблюдателя к сосредоточению внимания на частностях и самоконтролю, а также пунктуальности, исполнительности и педантизму. Здесь события регистрируются по детально разработанной процедуре. Бесструктурное наблюдение не требует расчленения наблюдаемого поведения на элементы с их четкой фиксацией. Оно подходит для фиксации наиболее часто встречающихся форм поведения или, наоборот, – очень ярких, необычных, когда заранее не определена большая часть элементов, подлежащих регистрации. Такой вид наблюдения требует во многом противоположного – солидной теоретической подготовки в области социологии, психологии, социальной психологии и конфликтологии, умения с одинаковым вниманием следить, как минимум, за 5-7 параметрами ситуации, способности быстро переключать внимание, не зацикливаясь лишь на каком-либо одном проявлении категории наблюдения. Здесь исследователь пользуется лишь общим принципиальным планом.

Невключенным называют наблюдение, предназначенное для фиксации актов традиционного (обычного, привычного) и открытого (нескрываемого от других) поведения. Осуществляя его, наблюдатель обязан находиться вне изучаемого объекта, воспринимать этот объект со стороны, никоим образом не вмешиваясь в естественный ход событий, в том числе, не задавая наблюдаемым никаких вопросов. Идеальный наблюдатель невключенного наблюдения старается быть невидимкой. Поскольку этот идеал недостижим, наблюдателю надлежит вести себя так, чтобы на него обращали как можно меньше внимания, дабы уменьшить помехи, вносимые им в наблюдаемое явление. Ему противопоказана яркая (броская) одежда, экстравагантность манер поведения, излишняя демонстрация своей заинтересованности изучаемыми событиями. Он должен иметь устойчивую психику, флегматичный темперамент, способность сохранять самообладание при резких изменениях ситуации, терпение и устойчивость в сохранении своей позиции стороннего наблюдателя.

Включенное наблюдение называется так потому, что наблюдатель преднамеренно включается (внедряется) в изучаемый объект, принимает участие в происходящих в нем процессах. Открытому варианту включенного наблюдения свойственно то, что наблюдаемые знают о факте нахождения среди них исследователя и имеют представление о целях его деятельности. Такому наблюдателю потребуется умение быстро и эффективно налаживать контакты с незнакомыми людьми, общительность, доброжелательность, тактичность, сдержанность и толерантность (терпимость к другим людям).

Включенное наблюдение, проводящееся инкогнито (скрыто), когда наблюдаемые не знают о наблюдателе, думают, что он – один из них, иногда отождествляется с научным шпионажем. Здесь наблюдателю понадобятся не только вышеназванные качества, но и артистизм, умение реагировать одновременно на многие сигналы (максимально возможно одновременно зафиксировать девять параметров), быстро систематизировать и надолго (точнее до момента заполнения соответствующей методической документации) запомнить их, способность не сбиться с исследовательской позиции под воздействием разнообразных обстоятельств, сохранять нейтралитет при конфликтах между наблюдаемыми и многие другие качества, близкие к качествам разведчика.

Включенное наблюдение, однако, принципиально отлично от шпионажа в обычном понимании. Его цель – не вред, а польза наблюдаемым, используемые в нем приемы получения информации должны отвечать нормативам научной этики. Это значит, что исследователь-наблюдатель фиксирует лишь те акты поведения (события), на регистрацию которых нацеливает исследовательская программа. Это значит, что он не имеет права разглашать полученную информацию, использовать ее не для научных, а каких-либо других целей. Это значит, наконец, что исследователь несет ответственность не только за качество собранной и обработанной им информации, но и за все последствия своего вмешательства в изучаемые социальные явления. Нравственный долг социолога, как и врача «не навредить» своими действиями, а напротив активно помогать решать возникающие проблемы.

Специфические требования к профессиональным знаниям и умениям, а также личностным качествам социолога предъявляют и другие разновидности наблюдения. В лабораторных наблюдениях, проводимых в искусственно созданных условиях, повышается значимость умения исследователя регулировать эти условия и контролировать их влияние на наблюдаемых, а также таких черт, как принципиальность и аккуратность, техническая грамотность (в связи с использованием аудиовизуальных средств наблюдения). В полевых наблюдениях, осуществляемых в обычной социальной жизни и дающих более объективную информацию, особую роль играют знания смыслов невербальных реакций людей (улыбок, жестов), оперативная память, аналитичность мышления наблюдателя, его способность отграничивать друг от друга отдельные признаки изучаемого объекта, распределять свое внимание на все эти признаки и переключать его на один из них.

Случайные, не предусмотренные исследовательской программой, наблюдения, при которых единицы наблюдения жестко не регламентированы, могут стать эвристически ценными лишь при условии развитости теоретического мышления, научного воображения и интуиции социолога. Но эти качества необязательны в систематическом наблюдении, нацеленном на регулярную фиксацию (по строгому графику и в четко регламентированных методических документах) единиц наблюдения, определенных не самим наблюдателем, а научным руководителем исследования.

Контролируемым называется наблюдение, при котором осуществляется контроль за результатами. Главная цель такого контроля данных – повышение их достоверности. Это достигается двумя способами: одна и та же ситуация наблюдается несколькими наблюдателями, после чего полученные результаты перепроверяются, или происходит интенсификация наблюдений за одним и тем же объектом: резко увеличивается их количество. Чаще всего перепроверка характерна для структурированного наблюдения. Здесь контроль означает сверку данных, полученных разными наблюдателями, с помощью расчета средних показателей для каждого наблюдаемого элемента. Перепроверка может происходить и в рамках бесструктурного наблюдения, когда разные исследователи сверяют свои впечатления, свои видения наблюдаемой ситуации с целью выявить «сухой остаток».

Рассмотренная классификация наблюдений, как и любая типология, условна и отражает лишь наиболее значимые особенности наблюдения. Поэтому всякий раз, учитывая цель и характер планируемого исследования, решая вопрос о применении метода наблюдения, соотносят позитивные и негативные свойства его различных видов.

Таблица 1