Что такое надежность в исследованиях?
В исследованиях надежность описывает степень, в которой результаты данного исследования могут быть повторены или воспроизведены в тех же условиях. Исследование с высокой надежностью – дает стабильные результаты каждый раз, когда оно проводится. Более того, надежность — это один из способов, с помощью которого мы можем определить, стоит ли доверять результатам работы. Исследование с противоречивыми результатами, когда результат каждый раз меняется, указывает на то, что оно имеет низкую надежность и не полезно.
Существует несколько способов обеспечения надежности. Надежность во времени означает, оно имеет последовательные результаты, когда то же самое исследование проводится в разные моменты времени одним и тем же человеком. Например, исследователь показывает, что запись в дневнике благодарности каждое утро в течение месяца повышает уровень удовлетворенности жизнью у студентов колледжа. Если тот же исследователь повторяет работу в следующем году и получает те же результаты, значит исследование демонстрирует надежность во времени.
Кроме того, исследование может быть надежным в различных выборках. Это означает последовательность измерений внутри исследования. Есть несколько способов оценки надежности в разных выборках, включая разделение измерений выборки на две группы для сравнения. Исследователи также могут сравнить несколько точек данных в рамках измерения или оценки, которые должны коррелировать, чтобы увидеть, как они сравниваются. Эти конкретные методы будут дополнительно обсуждаться в следующем разделе. Кроме того, надежность между экспертами можно оценить, попросив другого человека выполнить одно и то же исследование.
Надежность — один из способов определения качества исследования. Демонстрация того, что исследования надежны во времени и надежны в разных выборках, придает достоверность выводам. Четкое понимание определения надежности в исследованиях дает читателям возможность определить, насколько можно доверять результатам источника.
Что такое достоверность исследования?
Как и надежность, валидность — это способ оценить качество исследования. Валидность описывает степень, в которой результаты действительно измеряют то, для измерения чего они предназначены. Валидность исследования относится к его точности. Действительно ли исследование, предназначенное для измерения тревожности группы людей, измеряет тревогу этой группы? Или вместо этого оно измеряет настроение людей? Продолжая наш первый пример: действительно ли исследование, измеряющее удовлетворенность жизнью студентов колледжа, измеряет удовлетворенность жизнью? Обеспечение этого факта повышает достоверность работы.
Чтобы иметь полезные и качественные исследования, необходимо учитывать как надежность, так и валидность. Валидность и надежность — разные, но связанные понятия. Надежность относится к воспроизводимости, а валидность относится к точности. Исследование может повторяться много раз и каждый раз давать один и тот же результат, однако результат может быть неправильным или неточным. Это исследование будет иметь высокую надежность, но низкую валидность; и поэтому выводы из этого сделать нельзя. Рассмотрим термометр, который трижды повторяет показания температуры в 70 градусов по Фаренгейту, но фактическая температура духовки составляет 100 градусов по Фаренгейту. Показания температуры надежны, но недействительны. Подводя итог взаимосвязи между валидностью и надежностью в исследованиях, можно сказать, что исследование может быть надежным, но не быть действительным. Но если исследование достоверно, оно также часто является надежным.
Постоянные, но неправильные показания температуры надежны, но не действительны.
Обеспечение надежности и достоверности исследований
Существуют различные способы, с помощью которых исследователь может обеспечить надежность и достоверность. Чтобы повысить надежность, социологи должны тщательно и последовательно применять методы, а также стандартизировать процедуры исследования. Если исследование проводят несколько людей, методы должны быть четко описаны каждому из них, чтобы исследование проводилось последовательно. Когда несколько людей проводят интервью или наблюдения за участниками исследования, важно, чтобы их оценки были стандартизированы, чтобы избежать предвзятости. Сохранение максимально однородных условий приведет к уменьшению вариаций и повышению воспроизводимости результатов.
Есть несколько способов повысить достоверность исследований. Важно использовать качественные и специфические методы измерения. Следует рассмотреть методы оценки или измерения, эффективность которых была доказана в предыдущих исследованиях, поскольку существует более высокая вероятность того, что эти методы позволят измерить то, что нужно. Образцы для исследования следует выбирать тщательно, следя за тем, чтобы их было достаточно и они принадлежали к четко определенной группе. Например, исследование всего пяти человек не даст столь же убедительных результатов, как исследование 5000 человек.
Типы надежности исследования
Существует несколько способов оценить надежность научного исследования. Метод разделения пополам делит исследуемые образцы на два набора, количественно оценивает измерения для каждого набора и сравнивает их. Если у социологов есть результаты 100 студентов колледжей, они могут с помощью метода разделения пополам разделить результаты на две группы по 50 человек и сравнить их. Они ожидали аналогичных результатов от каждой из двух групп.
Метод повторного тестирования представляет собой исследование надежности, которое оценивает надежность исследования с течением времени. Если ожидается, что измерения останутся стабильными с течением времени, полезно провести измерения одной и той же группы в другой момент времени и сравнить результаты двух исследований. Ожидается, что некоторые конструкции, такие как личность и интеллект, останутся неизменными с течением времени. Следовательно, если исследователь оценивает интеллект группы студентов в два момента времени и измерения очень похожи, исследование будет иметь высокую надежность повторного тестирования.
Надежность внутренней согласованности показывает, насколько согласованы измерения по нескольким элементам, которые пытаются измерить одну и ту же переменную. Если несколько вопросов оценки предназначены для измерения интеллекта, то ответы на эти вопросы должны коррелировать друг с другом. Если ответы на эти вопросы не коррелируют друг с другом, результаты оценки не являются достоверными. Поскольку внутренняя согласованность оценивает согласованность элементов в одном наборе измерений, это эффективный способ оценить надежность без необходимости повторения исследования.
Коэффициент надежности — это инструмент для оценки надежности измерений в различных контекстах. Различные контексты могут включать исследования, завершенные в разные моменты времени или другой группой. Коэффициенты надежности варьируются от 0 до 1, и чем ближе значение к 1, тем более надежным является исследование в разных контекстах. Хотя самый высокий коэффициент надежности равен 1, все измерения имеют некоторую погрешность, поэтому на практике коэффициент надежности 1 не ожидается.
Типы достоверности исследования
При описании научного исследования существует несколько типов достоверности. Внутренняя валидность оценивает, верна ли причинно-следственная связь, установленная в ходе исследования, и нет ли другого обоснования результата. Многие исследования предполагают причинно-следственную связь между переменными, например, связь между записью в журнале благодарности (причина) и повышением удовлетворенности жизнью (следствие) из первого примера. Чтобы оценить внутреннюю валидность этого исследования, социологам следует задаться вопросом:
- Есть ли другое объяснение повышению удовлетворенности жизнью этих студентов?
- Может быть, какие-то другие переменные изменились и повысили их уровень удовлетворенности жизнью?
Внутренняя валидность исследования тесно связана с методами исследования и тем, насколько хорошо они устраняют мешающие факторы, переменные, которые могут повлиять на результат.
Другой тип валидности – внешняя валидность. Она описывает степень, в которой результаты, полученные в при изучении выборки, могут быть применены за пределами этой выборки. Если выборкой исследования является группа мужчин, внешняя валидность показывает, можно ли исследование также применить к женщинам. Еще одним примером внешней валидности является то, насколько исследование людей, живущих в Кентукки, может быть применено к людям, живущим в Аризоне. Если исследование имеет низкую внешнюю валидность, то результаты не очень полезны или не применимы за пределами исследования.
Экологическая валидность определяет степень, в которой результаты исследования полезны в реальной жизни, вне контекста исследования. Легко видеть, что экологическая достоверность очень важна в лабораторных исследованиях. Крайне важно, чтобы социологи понимали, насколько применимы их выводы в повседневной жизни за пределами лаборатории. Применимо ли исследование, проведенное на мышах, к обычным людям? Кроме того, важно оценить экологическую обоснованность исследований групп людей. Говорит ли нам связь между ведением дневника благодарности и повышением удовлетворенности жизнью студентов колледжа о обычных людях дома, живущих своей повседневной жизнью?
Внутренняя, внешняя и экологическая валидность оценивают достоверность исследования. Существует три дополнительных типа, которые оценивают достоверность измерений или оценок. Это конструктная валидность, валидность содержания и валидность критерия.
Конструктивная валидность — это степень точности оценки или измерения сложной идеи, теории или черты. Конструкт — это совокупность относительно простых идей в сложную идею или концепцию. Примерами конструктов являются интеллект, тревога и депрессия, которые можно вывести из поведения, но невозможно измерить напрямую. Валидность конструкции оценивает, насколько точно конструкция измеряется в исследовании.
Другой тип достоверности — это достоверность содержания, которая описывает, насколько хорошо измерение включает все аспекты изучаемой переменной. Валидность содержания оценивает, насколько хорошо «охвачена» конструкция, измеренная в исследовании. Например, если мы измеряем финансовую ответственность выборочной группы, но спрашиваем их только о том, приносят ли они обед на работу или каждый день покупают обед в ресторане, наша оценка будет иметь низкую содержательную достоверность. Мы не принимаем во внимание все другие модели поведения и черты характера, которые могут сделать эту группу финансово ответственной или нет.
Последний тип валидности, рассматриваемый в этом уроке, — это критериальная валидность. Валидность критерия описывает степень, в которой измерение коррелирует с другими соответствующими факторами, с которыми они должны связаны. Например, исследование высокой финансовой ответственности должно положительно коррелировать с оценкой собственного капитала.
Важность надежности и достоверности в исследованиях
Надежность и валидность являются важными способами оценки качества исследования. Можно использовать эти концепции для планирования методов исследования, чтобы результаты были заслуживающими доверия и полезными. Кроме того, читатели и критики научных исследований могут оценить, насколько надежно и достоверно исследование, а также насколько верны выводы, сделанные на его основе.
Высококачественные исследования надежны и валидны.
Для качественного исследования необходимы как надежность, так и валидность. Демонстрация надежности без обоснованности или валидности без надежности не является достаточно высоким стандартом. Надежность описывает воспроизводимость исследования, а валидность описывает точность. Кроме того, важны валидность отдельного инструмента, инструмента оценки/измерения, использованного в исследовании, и валидность общего дизайна исследования.
Краткие итоги урока
В этом уроке рассматриваются два способа оценки качества исследования: надежность и валидность. Надежность описывает, насколько воспроизводимо или повторяемо исследование, а достоверность описывает, насколько точно исследование измеряет то, что оно намеревается измерить. Существует несколько способов, с помощью которых социологи могут обеспечить достоверность и надежность результатов путем тщательного планирования своих методов работы. Валидность и надежность — связанные, но разные понятия. Исследование может быть надежным, но не быть валидным, тогда как исследования с высокой валидностью обычно надежны.
Важно отметить, что исследования можно считать надежными для всех выборок и надежными во времени. Существует несколько методов оценки надежности научного исследования, в том числе метод деления пополам, метод повторного тестирования, оценка внутренней согласованности и коэффициент надежности. Научное исследование может иметь несколько типов достоверности. Это внутренняя, внешняя и экологическая валидность. Кроме того, достоверность измерения или оценки может быть оценена на предмет достоверности конструкции, достоверности содержания и достоверности критерия.
Часто задаваемые вопросы
Что означает надежность в исследованиях?
Надежность — это концепция, описывающая, насколько воспроизводимо исследование. В целом, если его можно повторить и получить те же результаты, оно считается надежным. Исследования могут быть надежными во времени и надежными в разных выборках.
Как определить достоверность исследования?
Существует несколько инструментов для измерения надежности, включая метод деления пополам, метод повторного тестирования, внутреннюю согласованность и коэффициент надежности. Метод разделения пополам делит группу исследуемой выборки на две меньшие группы и сравнивает результаты. Метод повторного тестирования предполагает повторение одного и того же исследования в разное время для получения одного и того же результата. Внутренняя согласованность измеряет стабильность оценок или ответов на оценку, которые должны коррелировать. Коэффициент надежности представляет собой число от 0 до 1, которое показывает, насколько вероятно, что дисперсия, показанная в результатах исследования, обусловлена истинной дисперсией или ошибкой.
Почему надежность важна в исследованиях?
Надежность важна, поскольку она измеряет качество работы. Результаты, которые являются правдивыми или точными в результате научного исследования, часто являются надежными.
Какова достоверность исследования?
Валидность исследования — это оценка того, насколько оно точно. Он описывает степень, в которой исследование фактически измеряет то, что оно намеревается измерить.
