Что такое верификация методик измерений
Верификация методик анализа
Что такое верификация?
Верификация [verification] – подтверждение лабораторией способности получать достоверные результаты (пригодные для решения конкретной задачи) по готовой валидированной методике
Отличие верификации от валидации
Валидация
доказываем, что МЕТОДИКА пригодна для решения конкретной аналитической задачи, т.е. позволяет получать достоверные результаты
Верификация
доказываем, что ЛАБОРАТОРИЯ в состоянии получить достоверные результаты по данной ВАЛИДИРОВАННОЙ методике
Из таблицы сразу видно, что лаборатория, которая проводила валидацию «автоматически» доказала достоверность результатов, получаемых в своей лаборатории (естественно, при успешной валидации)
Зачем делать верификацию?
Проведение верификации методик предусмотрено ISO 17025, ведущими фармакопеями и правилами GMP:
Лаборатория должна подтвердить, что она может правильно использовать стандартные методики, прежде чем приступить к испытаниям
п. 5.4.2 ГОСТ ИСО/МЭК 17025-2009
Лаборатория, которая использует методику испытаний и которая не выполняла ее первоначальную валидацию, должна верифицировать пригодность методики
Литература по верификации
Видео про верификацию (примеры)
Шаблон протокола верификации для химической лаборатории
Вопрос-ответ
Кто несет ответственность за верификацию? Ваш шаблон гарантирует что этого эксперимента достаточно?
Мы не аккредитованная лаборатория. Нам все равно надо делать верификацию?
Любая лаборатория, даже не аккредитованная, несет полную ответственность за выдаваемые результаты. Верификация позволяет убедиться самим, и подтвердить документально, что по данной методике лаборатория может выдавать достоверные результаты.
Верификация выгодна любому предприятию, т.к. существенно снижает риски получения недостоверных результатов, и позволяет выявить проблему на старте, а не через год работы.
Потери от недостоверных результатов анализа (выпуск некачественной и опасной продукции, работа технологов «впустую» и др.) обычно на порядки более существенны, чем затраты на организацию нормальной работы лаборатории.
Верификация гарантирует, что теперь у нас всегда будут достоверные результаты?
Чтобы быть уверенным что и дальше результаты выдаются достоверные, проводят контроль качества и множество других процедур.
В СССР никаких верификаций не делали, и нормально работали!
Делали. Только называлась это по другому: «внедрение методики», «постановка методики», «отработка методики». Эту процедуру, в соответствии современными международными рекомендациями, мы называем верификацией.
Вы гарантируйте, что к шаблону не будет вопросов?
Нет. Это просто пример-шаблон, чтобы доработать его под себя. Ответственность лежит на конкретной лаборатории.
По какому ГОСТу, нормативному документу составлен этот шаблон?
Шаблон составлен на основе нашего опыта внедрения методик, здравого смысла, с опорой на международные рекомендации Eurachem «A Laboratory Guide to Method Validation and Related Topics» и некоторые Российские документы из рекомендованного списка литературы.
А вот в ГОСТе, РМГ написано не так!
Любой ГОСТ в России доброволен к применению:
добровольность применения заинтересованным лицом документов в области стандартизации и обязательность соблюдения указанным лицом требований, содержащихся в этих документах, в случае объявления об их использовании, а также в случае определения обязательности исполнения требований стандартов в рамках контрактных (договорных) обязательств
Если лаборатория не обременена обязательствами, разумно опереться на Р 50.2.060, РМГ 76, РМГ 61, Eurachem «Laboratory guide to method validation» как на справочные документы, доработав шаблон под себя.
А почему не оценивается погрешность / неопределенность?
Шаблон содержит минимальный, наш взгляд, объем эксперимента, чтобы можно было убедиться в нормальной работе методики, и начать работать. Делать расчет неопределенности / погрешности на основе только 3 серий измерений на наш взгляд не совсем корректно.
Можно расширить объем эксперимента (количество серий), и рассчитать погрешность / неопределенность на основе оценок правильности и прецизионности (по ГОСТ Р ИСО 21748-2012, РМГ 61-2010, Р 50.2.060-2008, приложениям А и Б, РМГ 76-2014).
Кто утверждает критерии верификации? Где их брать?
Т.к верификации подвергаются только валидированные методики (для которых уже доказано, что методика позволяет получать результаты, пригодных для достоверного принятия управленческих решений по результатам анализа), разумно проверить выполнение базовых валидционных критериев (пусть в меньшем объеме): повторяемости, промежуточной прецзионности, правильности.
Для обоснования требований к верификационным критериям есть несколько подходов:
Верификация и (или) валидация методики калибровки средства измерений, разработанной лабораторией?
10 сообщений в этой теме
Рекомендуемые сообщения
Присоединиться к обсуждению
Вы можете ответить сейчас, а зарегистрироваться позже. Если у вас уже есть аккаунт, войдите, чтобы ответить от своего имени.
Информация
Недавно просматривали 0 пользователей
Ни один зарегистрированный пользователь не просматривает эту страницу.
Популярные темы
Автор: AtaVist
Создана 11 Августа 2017
Автор: larina 38
Создана 1 Декабря
Автор: Savk
Создана в субботу в 05:18
Автор: газ
Создана 7 часов назад
Автор: berkut008
Создана 16 Января 2019
Автор: AtaVist
Создана 11 Августа 2017
Автор: larina 38
Создана 1 Декабря
Автор: Геометр
Создана 2 Декабря
Автор: Дмитрий1971
Создана 5 Января 2020
Автор: asutp2
Создана 11 Ноября
Автор: AtaVist
Создана 11 Августа 2017
Автор: larina 38
Создана 1 Декабря
Автор: Геометр
Создана 2 Декабря
Автор: Metrolog-sever
Создана 2 Июля 2014
Автор: Дмитрий1971
Создана 5 Января 2020
Автор: AtaVist
Создана 11 Августа 2017
Автор: berkut008
Создана 16 Января 2019
Автор: ЭДСка
Создана 23 Ноября 2020
Автор: Metrolog-sever
Создана 2 Июля 2014
Автор: владимир 332
Создана 3 Декабря 2019
Автор: AtaVist
Создана 11 Августа 2017
Автор: berkut008
Создана 16 Января 2019
Автор: Metrolog-sever
Создана 2 Июля 2014
Что такое верификация методик измерений
Валидация и верификация методик измерений
Любой объект, процесс или услуга должны соответствовать своему назначению и предполагаемому использованию, т.е. решать конкретные задачи заказчика, который их приобретает. Зимняя обувь должна быть теплой, комфортной, надежной; процесс производства йогурта должен быть стерильным и безопасным, соответствующим требованиям технических условий; стрижка должна быть выполнена аккуратно, профессионально, учитывая индивидуальность заказчика.
Методики измерений – это процесс, который имеет свое определенное назначение: получить информацию об интересующем параметре/показателе некоторого объекта (сырьё, продукция, объекты окружающей среды, биологический материал и т.п.). Полученная в результате применения методики измерений информация, для измеряемых величин выраженная в виде результата измерения, используется затем для принятия управляющих решений (соответствует/не соответствует требованиям, превышен или нет заданный предел, постановка диагноза и т.п.). Чтобы принять верное решение, нужно доверять информации, на основании которой оно принимается, и, следовательно, методике измерений, которая эту информацию предоставляет.
Доверие выражается в виде определенных требований, которым должна соответствовать методика измерений. Эти требования подтверждаются в ходе валидации/ верификации методик измерений. Разберемся с понятиями. С точки зрения метрологии понятия валидации и верификации закреплены в международном словаре по метрологии VIM3 [1].
Верификация – предоставление объективных свидетельств того, что данный объект полностью удовлетворяет установленным требованиям.
Валидация – верификация, при которой установленные требования связаны с предполагаемым использованием.
ВАЛИДАЦИЯ/ВЕРИФИКАЦИЯ МЕТОДИК
Выполним работы по Валидации/верификации методик измерений
Если в качестве объекта рассмотреть методику измерений, то верификация – это процесс подтверждения того, что методика соответствует установленным к ней требованиям, в первую очередь требованиям к получению по ней результатов требуемого уровня качества (иными словами, предоставление достоверной информации).
Валидация методик измерений – это процесс подтверждения, через приведение объективных доказательств, как правило, полученных экспериментальным путем, того, что методику можно использовать для определенного назначения (например, для измерения содержания железа в крови).
Валидацией методик измерений, как правило, занимаются разработчики. В процессе валидации не только подтверждают, что методику можно использовать для конкретного назначения, но и проверяют ее работоспособность на различных стадиях: от пробоотбора до вычисления и представления результатов, а также устанавливают критерии для последующей верификации методики измерений конечными пользователями (лабораториями).
Верификацией методик измерений занимается ее пользователь (лаборатория) при внедрении методики измерений в свою практику. В данном случае пользователь должен привести доказательства, что методика измерений в лаборатории реализуется согласно установленных для нее требований (не хуже).
РАЗРАБОТКА МЕТОДИК
Выполним работы по разработке Методик выполнения измерений
Требования к методикам измерений устанавливаются через рабочие характеристики. Определяя рабочие характеристики методики измерений и сравнивая их с требованиями к ним, пользователь подтверждает соответствие методики измерений своему назначению (валидация) или просто соответствие этим требованиям (верификация).
Перечень рабочих характеристик небольшой:
В зависимости от назначения и области применения методики могут устанавливаться требования ко всем или к некоторым рабочим характеристикам.
Робастность исследуется при валидации при разработке методики измерений. Это, как правило, касается и специфичности.
Если методика измерений предназначена для скринингового анализа важными характеристиками являются специфичность, предел обнаружения и робастность. Если методика измерений предназначена для узкого диапазона измерений величины (например, при производстве лекарственных препаратов с заданным содержанием действующего вещества), важными являются специфичность, показатели точности измерений и робастность.
Если методика измерений предназначена для измерения величин (количественные измерения), важными с точки зрения метрологии, являются именно показатели точности. Верификация таких методик измерений может сводиться к подтверждению соответствия этих рабочих характеристик установленным требованиям. Если методика измерений используется при малых значениях измеряемой величины (определение микропримесей), здесь важной характеристикой является предел обнаружения.
РАЗРАБОТКА Методик оценивания неопределенности
В комплекте с автоматизированным расчетом неопределенности
Рабочие характеристики оцениваются на базе экспериментальных данных. В случае величин (количественные измерений), как правило, требуется оценить большее количество рабочих характеристик, но объем экспериментов меньше. Для номинальных свойств (качественный анализ), особенно где используется дихотомическая шкала (обнаружено/не обнаружено) объем экспериментов больше, поскольку получаемая информация менее информативна, чем результат измерения, но меньше рабочих характеристик требуется оценить.
Если при разработке методики измерений разработчик не провел валидацию или провел, но не указал требования к рабочим характеристикам, необходимые для ее корректного внедрения в лаборатории, то лаборатория сама должна провести валидацию с целью установления требований (хотя бы своих внутренних) для принятия решений о корректном применении методики измерений в лаборатории.
Информация по рабочим характеристикам методики измерений, полученная в лаборатории, затем используется при контроле качества и оценивании неопределенности измерений.
[1] JCGM 200:2012 International Vocabulary of Metrology – Basic and General Concepts and Associated Terms (VIM 3rd edition)
Аккредитация в Росаккредитации
форум для аккредитованных лабораторий
Валидация, верификация методик измерений
Непрочитанное сообщение macola555 » 30 май 2019 10:26
#2 Валидация методики
При переходе на новый ГОСТ без расширения
Требования по управлению документацией приведены в ГОСТ ИСО/МЭК 17025-2009, Приказа Минэкономразвития № 326 п. 23.7
Необходимо провести оценку пригодности новых методик:
-Проверить наличие необходимых ресурсов (оборудования, реактивов, соблюдение условий проведения измерений, квалификация персонала, и.т.п.)
-Изъять прошлые версии с рабочих мест и выдать учтенные копии новых методик.
-Ознакомить и оценить компетентность персонала по работе с новой методикой.
-При есть возможность провести верификацию.(пункт 1,и при необходимости экспериментально)
-При необходимости уведомить заказчика о переходе на другой стандарт.
Все вышеуказанные действия должны быть зарегистрированы. После выполнения указанных действий при выполнении испытаний по новой методике в протоколе вы должны указывать новую методику.
Валидация методик измерений – это процесс подтверждения, через приведение объективных доказательств, как правило, полученных экспериментальным путем, того, что методику можно использовать для определенного назначения (например, для измерения содержания железа в крови).
Валидацией методик измерений, как правило, занимаются разработчики. В процессе валидации не только подтверждают, что методику можно использовать для конкретного назначения, но и проверяют ее работоспособность на различных стадиях: от пробоотбора до вычисления и представления результатов, а также устанавливают критерии для последующей верификации методики измерений конечными пользователями (лабораториями).
Верификацией методик измерений занимается ее пользователь ( лаборатория ) при внедрении методики измерений в свою практику. В данном случае пользователь должен привести доказательства, что методика измерений в лаборатории реализуется согласно установленных для нее требований (не хуже).
#3 Валидация методики
Непрочитанное сообщение macola555 » 31 май 2019 15:58
#4 Валидация методики
Р 50.2.060-2008 Государственная система обеспечения единства измерений. Внедрение стандартизованных методик количественного химического анализа в лаборатории. Подтверждение соответствия установленным требованиям
http://docs.cntd.ru/document/1200069291
Отправлено спустя 12 минут:
У меня есть в планах шаблоны сделать в Excel по этим рекомендациям, но пока руки не дошли.
#5 Валидация методики
Непрочитанное сообщение macola555 » 31 май 2019 22:16
#6 Валидация методики
#7 Обсуждение специфики нового ГОСТа. ISO/IEC 17025-2019
Непрочитанное сообщение Гость » 03 окт 2019 18:01
По поводу валидации и верификации:
Мы пользуемся аттестованными методиками измерений и руководствами по эксплуатации СИ утвержденного типа. Это значит, что дополнительная валидация данных документов не требуется? ( валидация у нас= метрологическая аттестация?)
Я правильно понял эти два термина?
#8 Обсуждение специфики нового ГОСТа. ISO/IEC 17025-2019
#9 Верификация
Непрочитанное сообщение Харламова Ольга » 22 окт 2019 09:15
#10 Верификация
Непрочитанное сообщение ЕленаК » 22 окт 2019 13:39
#11 Верификация
Непрочитанное сообщение Харламова Ольга » 22 окт 2019 13:48
#12 Верификация
#13 Верификация
#14 Верификация
#15 Верификация
#16 Обсуждение специфики нового ГОСТа. ISO/IEC 17025-2019
Гость писал(а): ↑ 03 окт 2019 18:01 По поводу валидации и верификации:
Мы пользуемся аттестованными методиками измерений и руководствами по эксплуатации СИ утвержденного типа. Это значит, что дополнительная валидация данных документов не требуется? (валидация у нас= метрологическая аттестация?)
#17 Обсуждение специфики нового ГОСТа. ISO/IEC 17025-2019
Мне не понятно, почему возникают вопросы с валидацией) Старый стандарт обязывал валидировать нестандартные методы и методы, разработанные ООС, ничего не изменилось. Пример из жизни, приходит письмо на Госстандарта от бедных несчастных частных производителей говна для нас как они считают нищебродов, в частности, рапсовое масло, определение в этом говне серы. Производитель обратился к трем органам по оценке соответствия, заплатил деньги, три барана сделали анализ в своей области аккредитации по слову сера. Один из трех использовал метод определения серы в нефтепродуктах, второй в растительных маслах, третий непосредственно в рапсовом масле, и все получили разные результаты. Вопрос.
У кого правильный результат?
Результат может быть правильным у всех трех, в теории (при условии валидации только у двух), но правильным признается стандартный метод определения серы только в рапсовом масле (ГОСТ на рапсовое масло), где в области применения написано рапсовое масло, а остальные должны предоставить доказательство, (то есть валидацию), что данный метод позволяет определять серу не только в нефтепродуктах и растительных маслах, но и в рапсовом масле.
И не забывайте, что валидация это часть верификации.
#18 Валидация методик
Дорогие коллеги!
Хотелось бы получить консультацию по валидации методик. Наша испытательная лаборатория старается по максимуму следовать букве методики, однако, это не всегда возможно.
Первый случай:
К примеру, высоким спросом пользуются микробиологические испытания смывов в бассейнах, банях и т. п. Однако методика на смывы, у которой в области применения прописаны бани да бассейны, отсутствует в природе; нам приходится пользоваться методикой на смывы из ЛПУ. Сам ход испытания соблюден слово в слово; меняется только область применения. Каким образом в данном случае необходимо оформить валидацию? Есть ли у вас примеры такой валидации?
Второй случай:
В старых микробиологических методиках часто используется питательная среда МПА, для приготовления которой нужно приобрести мясо говядины или конины, которое всегда будет различного качества. Вместо приготовления такой среды из мяса, мы используем сухую обезвоженную питательную среду (ГМФ-агар), состав которой выверен и всегда одинаков, а качество гарантируется и производителем, и текущим контролем питательных сред, проводимым нашей лабораторией. Однако в методике всё ещё указано, что использовать нужно именно МПА из мяса, а никак ни что-то еще. Примечания о допустимости использования коммерческих вариантов, аналогичных питательных сред отсутствуют. Как в таком случае нужно оформить валидацию, чтобы «узаконить» коммерческий вариант питательной среды? Есть ли у вас примеры такой валидации?
Благодарю за понимание и надеюсь на Вашу помощь.
#19 Валидация методик
#20 Валидация методик
#21 Валидация методик
texadmin писал(а): ↑ 30 май 2019 13:10 это процесс подтверждения, через приведение объективных доказательств, как правило, полученных экспериментальным путем, того, что методику можно использовать для определенного назначения (например, для измерения содержания железа в крови).
Валидацией методик измерений, как правило, занимаются разработчики. В процессе валидации не только подтверждают, что методику можно использовать для конкретного назначения, но и проверяют ее работоспособность на различных стадиях: от пробоотбора до вычисления и представления результатов, а также устанавливают критерии для последующей верификации методики измерений конечными пользователями (лабораториями).
#22 Валидация методик
#23 Валидация методик
#24 Валидация методик
#25 Валидация методик
#26 Валидация, верификация методик измерений
#27 Валидация, верификация методик измерений
#28 Валидация, верификация методик измерений
7.2.2 Валидация методов
7.2.2.1 Лаборатория должна проводить валидацию нестандартных методов, методов, разработанных лабораторией, и стандартных методов, используемых за пределами их области применения или каким-либо иным образом модифицированных. Валидация должна быть настолько полной, насколько это необходимо, чтобы отвечать потребностям данного применения или области применения.
Примечание 1 — Валидация может включать процедуры отбора образцов, обращения с объектами испытания или калибровки и их транспортировки.
Примечание 2 — Для валидации метода может применяться один из следующих способов либо их комбинация:
a) калибровка или оценивание смещения и прецизионности с использованием эталонов или стандартных образцов;
b) систематическая оценка факторов, влияющих на результат;
c) проверка устойчивости метода посредством изменения управляемых параметров, таких как температура в термостате, дозируемый объем;
d) сравнение с результатами, полученными с помощью других валидированных методов;
e) межлабораторные сличения;
f) оценивание неопределенности измерений, связанной с результатами измерений, на основании понимания теоретических принципов метода и опыта его реализации при отборе образцов или проведении испытаний.
7.2.2.2 При внесении изменений в валидированный метод их влияние должно быть определено и, в случае если было установлено, что они оказывают влияние на первоначальную валидацию, должна быть выполнена новая валидация метода.
7.2.2.3 Характеристики валидированных методов, оцененные для предполагаемого использования, должны соответствовать потребностям заказчиков и установленным требованиям.
Примечание — Характеристики метода могут включать (но не ограничиваться) диапазон измерений, точность, неопределенность результатов измерений, предел обнаружения, предел количественного определения, избирательность метода, линейность, повторяемость или воспроизводимость, устойчивость к внешним воздействиям или эффектам влияния матрицы образца или испытываемого объекта и смещение.
7.2.2.4 Лаборатория должна сохранять следующие записи о валидации:
a) использованную процедуру валидации;
b) перечень требований;
c) определение характеристик метода;
d) полученные результаты;
e) заключение о пригодности метода вместе с подробным описанием его соответствия в отношении предполагаемого использования.