Когда «соответствует требованиям» становится статистическим решением: валидация экспресс-биологических скрининговых методов для обеспечения безопасности пищевых продуктов и кормов

Образец, который слишком легко проходит проверку

В 6:40 утра в понедельник партия кормов для животных ожидает проверки в портовой лаборатории.

У лаборатории есть лишь короткий промежуток времени, чтобы решить, может ли партия продолжить движение. Экспресс-биологический скрининговый метод за считанные минуты выдает результат «соответствует требованиям». Сигнал четкий. Контрольные показатели находятся в допустимом диапазоне. Оператор выпускает партию.

Позже подтверждающий метод обнаруживает загрязнение выше установленного законом предела.

Проблема заключалась не в том, что экспресс-метод работал медленно. И даже не обязательно в том, что ему не хватало чувствительности. Проблема была в том, что результат «соответствует требованиям» нес в себе больший уровень уверенности, чем позволяли обосновать данные валидации.

В сфере безопасности пищевых продуктов и кормов скрининговый метод является не просто ускоренной версией лабораторного анализа. Это система принятия решений. Ее задача — отделять материал, который может быть допущен к дальнейшему обращению, от материала, требующего расследования, одновременно контролируя два конкурирующих риска:

• Попадание загрязненного материала в цепочку поставок.
• Направление слишком большого числа соответствующих требованиям образцов на дорогостоящее подтверждающее исследование.

Именно поэтому регуляторное признание в меньшей степени зависит от впечатляющих аналитических сигналов, чем от тщательно обоснованных статистических данных.

Результат скрининга — это решение, связанное с риском

Каждый скрининговый метод устанавливает границу между двумя категориями:

Эта граница не является естественным свойством аналита. Она создается моделью валидации.

Результат, близкий к установленному законом пределу, особенно сложен для интерпретации. Небольшие изменения эффективности экстракции, состава матрицы, характеристик реагентов или отклика прибора могут переместить один и тот же образец с одной стороны границы на другую.

Психологическая ловушка знакома каждому, кто работал со сложными системами: люди склонны больше доверять четкому бинарному ответу, чем измеренной неопределенности. «Годен» кажется однозначным. На самом деле это утверждение о вероятности.

Поэтому метод, соответствующий регуляторным требованиям, должен отвечать на два вопроса:

1. Как часто чистый образец будет ошибочно признан подозрительным?
2. Как часто загрязненный образец будет ошибочно принят?

Первый вопрос касается ложно-положительных результатов. Второй — ложноотрицательных результатов, то есть результатов, ошибочно указывающих на соответствие требованиям.

Второй риск обычно более серьезен, поскольку загрязненный продукт может продолжить движение по пищевой или кормовой цепи без вмешательства.

Два статистических столпа: CCα и CCβ

Предел принятия решения: CCα

Предел принятия решения, или CCα, определяет концентрацию, выше которой образец может быть классифицирован как не соответствующий требованиям при контролируемой вероятности ошибки первого рода.

На практике CCα определяет, как часто образец, соответствующий требованиям, ошибочно признается подозрительным.

Предел принятия решения, установленный слишком низко, может казаться осторожным подходом. Однако чрезмерная осторожность создает собственный сценарий отказа:

• Больше партий, соответствующих требованиям, признаются подозрительными.
• Растет потребность в подтверждающих исследованиях.
• Лаборатории расходуют свои ресурсы на проверку безвредных результатов.
• Решения об импорте, производстве и выпуске замедляются.
• Доверие к скрининговой программе начинает снижаться.

Скрининговая система, которая считает почти все образцы подозрительными, не является надежной. Она просто обходится дорого.

Способность к обнаружению: CCβ

Способность к обнаружению, или CCβ, — это наименьшая концентрация, при которой метод может надежно обнаруживать, идентифицировать или классифицировать аналит, сохраняя вероятность ошибочного признания соответствия требованиям на принятом уровне или ниже.

Для регуляторного скрининга обычно устанавливается целевой показатель ложноотрицательных результатов ниже 5%. Для веществ с исключительной токсичностью, таких как диоксины, этот показатель может быть ниже 1%.

Таким образом, CCβ является более прямым показателем того, защищает ли скрининговый метод население от необнаруженного загрязнения.

Метод должен продемонстрировать способность обнаруживать значимое загрязнение на уровне минимального требуемого предела эффективности (MRPL) или на применимом законодательном пороге. Метод, который хорошо работает только при концентрациях, значительно превышающих установленный законом предел, может представлять аналитический интерес, но недостаточен для регуляторного скрининга.

Почему это различие важно

CCα и CCβ описывают разные ошибки. Их смешение приводит к созданию планов валидации, которые выглядят полными, но оставляют без ответа главный вопрос безопасности.

Обоснованный метод должен контролировать обе стороны принятия решения.

Чувствительность должна иметь практическое значение на уровне установленного законом предела

Низкий предел обнаружения полезен только тогда, когда он помогает принять решение, которое лаборатория действительно должна принять.

Для многих загрязнителей пищевых продуктов и кормов практическим ориентиром при разработке является LOD, близкий к одной пятой от интересующего регуляторного уровня. Такой запас учитывает вариации, вызванные следующими факторами:

• Разложение образца.
• Неполная экстракция.
• Подавление матрицей.
• Неоднородное загрязнение.
• Условия транспортировки и хранения.
• Вариабельность реагентов между партиями.

Требуемая чувствительность может достигать пико- или нанограммовых уровней, особенно для микотоксинов, стойких органических загрязнителей и других контаминантов, опасных даже при очень низких концентрациях.

Но одной чувствительности недостаточно, чтобы метод соответствовал своему назначению.

Метод может давать сильный сигнал при низких концентрациях и при этом приводить к ненадежным решениям, если сигнал искажается жирами, белками, крахмалами, пигментами или структурно сходными соединениями. Аналитический вопрос заключается не просто в том, «видит ли метод что-либо».

Он звучит так:

Способен ли метод отличить целевое загрязнение от химического состава образца при концентрации, на которой нормативные требования предписывают принять меры?

Именно на реальных образцах метод проверяется на селективность

Чистый буфер способен придать почти любому методу безупречный вид.

Реальные матрицы кормов и пищевых продуктов гораздо менее предсказуемы. Материалы, богатые маслами, переработанные ингредиенты, сухие комбикорма и продукты с высоким содержанием белка могут влиять на поведение метода.

Селективность

Селективность показывает, сохраняет ли метод правильную классификацию в присутствии естественных компонентов матрицы и совместно экстрагируемых веществ.

Селективный метод должен оставаться надежным, когда целевой аналит окружен соединениями, которые могут:

• Подавлять аналитический сигнал.
• Увеличивать фоновый отклик.
• Мешать связыванию.
• Изменять кинетику реакции.
• Имитировать структуру целевого соединения.
• Изменять степень извлечения при экстракции.

Специфичность

Специфичность связана со способностью метода отличать целевой аналит от структурно родственных соединений и перекрестно реагирующих веществ.

Это различие важно, поскольку метод может быть селективным в одной матрице и обладать низкой специфичностью по отношению к определенному аналогу. Оба свойства необходимо установить, если предполагается использовать метод для нескольких категорий продукции.

Поэтому валидация должна включать холостые образцы, представляющие каждый основной класс матриц, а также релевантные интерференты и перекрестно реагирующие вещества. Одна простая матрица не может подтвердить широкую регуляторную надежность.

Прецизионность — это свойство рабочего процесса

Метод может быть прецизионным в лаборатории, занимающейся разработкой, и нестабильным при рутинном использовании.

Разница часто проявляется в небольших операционных деталях: времени экстракции, температуре реагентов, последовательности пипетирования, условиях инкубации, технике оператора или дрейфе прибора.

Для скрининговых методов распространенной целью повторяемости является коэффициент вариации ниже 30%. Точный критерий приемки зависит от аналита, матрицы, платформы и нормативной базы, но принцип остается неизменным: метод должен обеспечивать стабильную классификацию при повторных запусках.

Каждая серия должна включать контрольные образцы, обработанные в условиях, аналогичных условиям обработки исследуемых образцов:

• Холостые образцы, экстрагированные одновременно с исследуемыми образцами.
• Референтные или обогащенные образцы.
• Положительные и отрицательные контроли.
• Определенные диапазоны приемки.
• Документированные условия обращения с образцами и инкубации.

Эти контроли не только подтверждают работоспособность набора. Они помогают отличить подлинные результаты образцов от изменений, вызванных дрейфом метода.

Контрольный образец, добавленный после экстракции, не может выявить ошибку экстракции. Контроль, обрабатываемый только один раз в день, может не обнаружить проблему, характерную для конкретной серии. Наиболее надежные контроли интегрированы в тот же рабочий процесс, что и образцы, качество которых они должны подтверждать.

Лаборатория является частью метода

Данные валидации не существуют независимо от лаборатории, которая их получает.

Оборудование учреждения, компетентность персонала, программа калибровки, документация и средства контроля качества влияют на то, можно ли защитить результаты во время аудита или признать их в разных юрисдикциях.

Аккредитация по ISO 17025

Для регуляторной работы испытательная лаборатория должна работать в рамках аккредитации по ISO 17025 в соответствующей области.

ISO 17025 обеспечивает основу для подтверждения:

• Технической компетентности.
• Валидации и верификации методов.
• Калибровки и технического обслуживания оборудования.
• Обучения и допуска персонала к работе.
• Метрологической прослеживаемости.
• Контролируемой документации.
• Работы с несоответствующими результатами.
• Непрерывного надзора за качеством.

Аккредитация не делает слабый метод надежным. Она выполняет не менее важную функцию: демонстрирует, что заявленные характеристики метода были получены в рамках контролируемой системы, допускающей аудит.

Такие руководящие документы, как Решение Комиссии ЕС 2002/657/EC, также устанавливают структурированные статистические ожидания в отношении характеристик метода, включая пределы принятия решения, способность к обнаружению, прецизионность, селективность и план валидации.

Точные регуляторные требования различаются в зависимости от юрисдикции и аналита. Основная логика остается неизменной: заявленные характеристики должны быть измеримыми, воспроизводимыми и связанными с четко определенным регуляторным решением.

Цепочка поставок реагентов становится переменной валидации

Когда метод переходит от исследовательского применения к рутинному мониторингу, его исходные материалы перестают быть второстепенной деталью.

Вариабельное сродство антитела может изменить границу принятия решения. Изменение активности фермента может повлиять на развитие сигнала. Непостоянные характеристики субстрата могут увеличить вариабельность между запусками. Партия реагента, которая ведет себя иначе в сложной матрице, может нарушить работу метода, ранее соответствовавшего критериям приемки.

Поэтому для производителей диагностических средств, лабораторий и научно-исследовательских институтов выбор исходных материалов должен рассматриваться как часть контроля метода.

К важным характеристикам относятся:

• Специфичность и сродство антитела.
• Активность и стабильность фермента.
• Однородность субстрата.
• Сопоставимость между партиями.
• Контроль чистоты и загрязнения.
• Требования к хранению и транспортировке.
• Техническая документация и прослеживаемость.
• Совместимость с предполагаемым форматом метода.

Даже лучший план валидации не сможет бесконечно компенсировать нестабильность исходных компонентов. Если метод должен поддерживать регуляторные решения, цепочка поставок материалов должна обеспечивать такой же уровень дисциплины.

Экономические последствия ложно-положительных результатов

Ложноотрицательные результаты несут наибольший риск для безопасности. Однако именно ложно-положительные результаты определяют, останется ли скрининговая программа экономически жизнеспособной.

Каждый ложно-положительный результат может привести к:

• Подтверждающему масс-спектрометрическому анализу.
• Дополнительным операциям с образцом.
• Задержке выпуска или отгрузки.
• Расследованию в отношении поставщика.
• Представлению регуляторной отчетности.
• Потенциальным коммерческим спорам.

В небольших масштабах эти затраты могут казаться приемлемыми. Однако в рамках национального контроля импорта или крупносерийного производства кормов они быстро увеличиваются.

Это создает практическую задачу оптимизации.

Метод должен быть достаточно чувствительным, чтобы обеспечить CCβ с комфортным запасом ниже установленного законом предела. Одновременно CCα должен оставаться достаточно близким к целевому пределу, чтобы не перегружать систему подтверждающих исследований.

Метод, который в абстрактном смысле является «более чувствительным», не обязательно лучше. Если его селективность низкая, он может превратить рутинный мониторинг в очередь из ненужных расследований.

Цель состоит не в достижении минимально возможного порога. Цель — получить наиболее надежное регуляторное решение при приемлемых операционных затратах.

План валидации для разных задач

Загрязнители высокого риска

Для диоксинов, афлатоксинов и других загрязнителей с серьезными последствиями приоритетами должны быть:

• Доля ложноотрицательных результатов ниже применимого строгого порога.
• CCβ на уровне регуляторного предела или ниже.
• Валидация на наиболее сложных матрицах.
• Расширенные исследования перекрестной реактивности.
• Надежные процедуры экстракции и извлечения.
• Консервативный контроль дрейфа метода.

Для таких аналитов цена пропущенного положительного результата особенно высока. План валидации должен учитывать эту асимметрию.

Высокопроизводительный импортный и рутинный скрининг

Для масштабных скрининговых программ приоритетами должны быть:

• Повторяемость и операционная прецизионность.
• CV ниже установленного критерия приемки.
• Четкие правила приемки серии.
• Быстрая и воспроизводимая подготовка образцов.
• CCα, достаточно близкий к целевому пределу для контроля ложно-положительных результатов.
• Контроли, выявляющие ошибки экстракции и сбои, характерные для конкретного запуска.

Пропускная способность — это не только скорость метода. Это количество надежных решений, которые лаборатория может принимать в течение дня.

Широкий охват матриц

Для методов, предназначенных для работы с многочисленными категориями пищевых продуктов и кормов, приоритетами должны быть:

• Исследования извлечения для конкретных матриц.
• Холостые образцы из каждой основной группы матриц.
• Проверка интерференции и перекрестной реактивности.
• Рецептуры реагентов, устойчивые к различиям в химическом составе образцов.
• Отдельные заявления о характеристиках для существенно различающихся матриц.

Метод, валидированный только на простой матрице, не следует представлять как универсально применимый.

Как выглядит регуляторная уверенность

Метод скрининга, соответствующий регуляторным требованиям, обладает несколькими легко узнаваемыми характеристиками:

1. Модель принятия решений определена до формулирования заявлений о характеристиках.
2. CCα и CCβ рассчитаны на основе репрезентативных данных.
3. Результаты, ошибочно указывающие на соответствие требованиям, измерены на фактическом уровне регуляторного интереса.
4. Чувствительность подтверждена соответствующими исследованиями LOD и извлечения.
5. Селективность продемонстрирована на реальных матрицах, а не только в буфере.
6. Прецизионность остается приемлемой для разных операторов, запусков, дней и партий реагентов.
7. Контроли обрабатываются таким образом, чтобы проверять весь рабочий процесс.
8. Лаборатория работает в рамках соответствующей системы качества ISO 17025.
9. Исходные материалы достаточно стабильны, чтобы сохранять характеристики метода с течением времени.
10. Итоговый метод обеспечивает баланс между защитой здоровья населения и возможностями системы подтверждающих исследований.

Наиболее надежным является не метод с самой впечатляющей технической спецификацией, а тот, ограничения которого известны, измерены и контролируются.

Краткий обзор ключевых целевых характеристик

От концепции метода до рутинного контроля

Путь от перспективного биологического метода до обоснованного регуляторного метода представляет собой цепочку взаимозависимых элементов.

Сильное антитело не может компенсировать плохую подготовку образца. Низкий LOD не устранит неконтролируемые эффекты матрицы. Валидированный протокол не компенсирует нестабильность партий реагентов. А результат, внешне соответствующий требованиям, не может компенсировать лабораторную систему, неспособную объяснить, как этот результат был получен.

Именно поэтому разработка метода требует поддержки на протяжении всего жизненного цикла: от выбора исходных материалов, проектирования и аналитической оптимизации метода до планирования валидации и внедрения в рутинную практику.

CamelBio предоставляет производителям диагностических средств, лабораториям и научно-исследовательским институтам единый доступ к исходным материалам для IVD, техническим услугам и консалтингу. Поддержка охватывает путь от первоначальной концепции до клинического применения и помогает командам согласовать биологические характеристики с практическими требованиями к валидации.

Будь то высокоспецифичное антитело, надежная ферментная система, стабильные субстраты или рекомендации по валидации CCα/CCβ, цель остается одной: создать метод, способный быстро принимать решения, не заставляя регуляторов, лаборатории и участников цепочки поставок принимать неизмеренный риск.

Экспресс-скрининговый метод заслуживает доверия, когда каждый результат «соответствует требованиям» подтвержден доказательствами, достаточно надежными, чтобы выдержать проверку; начните процесс валидации с обращения к нашим экспертам.