03 - Социология. Услуги. Организация фирм и управление ими. Администрация. Транспорт
03.120 - Качество
03.120.30 - Применение статистических методов
17 - Метрология и измерения. Физические явления
17.020 - Метрология и измерения в целом
Росстандарт
29.10.2014
01.12.2015
01.06.2021
Не действующий c 01.06.2021
ГОСТ Р ИСО 11843-7-2014
Статистические методы. Способность обнаружения. Часть 7. Методы оценки с учетом фонового шума
ГОСТ Р ИСО 11843-7-2014
НАЦИОНАЛЬНЫЙ СТАНДАРТ РОССИЙСКОЙ ФЕДЕРАЦИИ
Статистические методы
СПОСОБНОСТЬ ОБНАРУЖЕНИЯ
Часть 7
Методы оценки с учетом фонового шума
Statistical methods. Capability of detection. Part 7. Methods of an estimation taking into account background noise
ОКС 03.120.30*
Дата введения 2015-12-01
Предисловие
1 ПОДГОТОВЛЕН Открытым акционерным обществом "Научно-исследовательский центр контроля и диагностики технических систем" (АО "НИЦ КД") на основе собственного перевода на русский язык англоязычной версии стандарта, указанного в пункте 4
2 ВНЕСЕН Техническим комитетом по стандартизации ТК 125 "Применение статистических методов"
3 УТВЕРЖДЕН И ВВЕДЕН В ДЕЙСТВИЕ Приказом Федерального агентства по техническому регулированию и метрологии от 29 октября 2014 г. N 1453-ст.
4 Настоящий стандарт идентичен международному стандарту ИСО 11843-7:2012* "Способность обнаружения. Часть 7. Методы оценки с учетом фонового шума" (ISO 11843-7:2012 "Capability of detection - Part 7: Methodology based on stochastic properties of instrumental noise", IDT).
Наименование настоящего стандарта изменено относительно наименования указанного международного стандарта для приведения в соответствие с ГОСТ Р 1.5-2012 (пункт 3.5).
При применении настоящего стандарта рекомендуется использовать вместо ссылочных международных стандартов соответствующие им национальные стандарты, сведения о которых приведены в дополнительном приложении ДА
5 ВВЕДЕН ВПЕРВЫЕ
6 ПЕРЕИЗДАНИЕ. Октябрь 2019 г.
Правила применения настоящего стандарта установлены в статье 26 Федерального закона от 29 июня 2015 г. N 162-ФЗ "О стандартизации в Российской Федерации". Информация об изменениях к настоящему стандарту публикуется в ежегодном (по состоянию на 1 января текущего года) информационном указателе "Национальные стандарты", а официальный текст изменений и поправок - в ежемесячном информационном указателе "Национальные стандарты". В случае пересмотра (замены) или отмены настоящего стандарта соответствующее уведомление будет опубликовано в ближайшем выпуске ежемесячного информационного указателя "Национальные стандарты". Соответствующая информация, уведомление и тексты размещаются также в информационной системе общего пользования - на официальном сайте Федерального агентства по техническому регулированию и метрологии в сети Интернет (www.gost.ru)
Введение
Методология линейной и нелинейной калибровки, приведенная в серии стандартов ИСО 11843, основана на использовании распределения вероятностей приведенной переменной состояния (измеряемая величина). При этом (явно или неявно) уделено внимание неопределенности, соответствующей оценке измеряемого отклика, преимущественно определяемого базовым шумом при инструментальном анализе. Во многих (если не в большинстве) аналитических приборах в тех случаях, когда значение измеряемой величины близко к минимальному обнаруживаемому значению, базовый шум является основной причиной неопределенности. Метод, установленный в настоящем стандарте в пределах его области применения, не требует использования большого количества повторных образцов (выборок), что способствует экономии времени и средств.
Основным понятием настоящего стандарта является математическое описание распределения вероятностей переменной отклика в терминах математически определенных случайных процессов. Это описание приводит к определению минимального обнаруживаемого значения. Взаимосвязь отклика и измеряемой величины описывают с помощью линейных и нелинейных калибровочных функций. Таким образом, настоящий стандарт согласован с ИСО 11843-2 и ИСО 11843-5.
_______________
Если калибровочная функция нелинейна, функция прецизионности переменной отклика в ИСО 11843 должна быть преобразована в функцию прецизионности приведенной переменной состояния, как показано в ИСО 11843-5. В этой ситуации ИСО 11843-5 может быть использован для целей настоящего стандарта без каких-либо изменений.
Положения настоящего стандарта, относящиеся к калибровке, распространяются также на градуировку. При этом под калибровочной функцией следует понимать градуировочную кривую.
1 Область применения
Фоновый шум всегда существует в аналитических инструментах. В настоящем стандарте установлены методы оценки минимального обнаруживаемого значения в случае, когда фоновый шум является преобладающим источником неопределенности измерений. Минимальное обнаруживаемое значение может быть математически выведено на основе стохастических характеристик фонового шума.
В стандарте установлены основные методы:
- определения стохастических свойств фонового шума;
- использования стохастических свойств фонового шума для оценки стандартного отклонения (SD) или коэффициента вариации (CV) переменной отклика;
- вычисления минимального обнаруживаемого значения на основе SD или CV (полученных выше).
Методы, установленные в настоящем стандарте, полезны для проверки обнаружения вещества с помощью различного типа измерительного оборудования, в котором фоновый шум преобладает над другими источниками неопределенности. Таким измерительным оборудованием могут быть приборы видимой и ультрафиолетовой поглотительной спектрометрии, атомной поглотительной спектрометрии, атомно-флуоресцентной спектрометрии, люминесцентной спектрометрии жидкостей и газовой хроматографии.
2 Нормативные ссылки
В настоящем стандарте использованы нормативные ссылки на следующие стандарты:
ISO 11843-1:1997, Capability of detection - Part 1: Terms and definitions (Способность обнаружения. Часть 1. Термины и определения)
ISO 11843-2:2000, Capability of detection - Part 2: Methodology in the linear calibration case (Способность обнаружения. Часть 2. Методология в случае линейной калибровки)
ISO 11843-5:2008, Capability of detection - Part 5: Methodology in the linear and non-linear calibration cases (Способность обнаружения. Часть 5. Методология в случаях линейной и нелинейной калибровки)
ISO 3534-1, Statistics - Vocabulary and symbols - Part 1: General statistical terms and terms used in probability (Статистика. Словарь и условные обозначения. Часть 1. Общие статистические термины и термины, используемые в вероятностных задачах)
ISO 3534-2, Statistics - Vocabulary and symbols - Part 2: Applied statistics (Статистика. Словарь и условные обозначения. Часть 2. Прикладная статистика)
ISO 3534-3, Statistics - Vocabulary and symbols - Part 3: Design of experiments (Статистика. Словарь и условные обозначения. Часть 3. Планирование эксперимента)
ISO 5725-1, Accuracy (trueness and precision) of measurement methods and results - Part 1: General principles and definitions [Точность (правильность и прецизионность) методов и результатов измерений. Часть 1. Общие принципы и определения]
3 Термины и определения
В настоящем стандарте применены термины по ИСО 3534-1, ИСО 3534-2, ИСО 3534-3, ИСО 5725-1, ИСО 11843-1, ИСО 11843-2, ИСО 11843-5, а также следующие термины с соответствующими определениями:
[ИСО 11843-5:2008, пункт 3.4]
Примечание 1 - Коэффициент вариации (CV) переменной отклика или приведенной переменной состояния, как функции приведенной переменной состояния, также применяют в качестве функции прецизионности.
Примечание 2 - Под точностью понимают значение SD или CV наблюдаемой переменной отклика или SD или CV приведенной переменной состояния при оценке с помощью калибровочной функции (ИСО 11843-5).
Примечание 4 - Существует большое количество видов функции прецизионности, но они могут быть преобразованы одна в другую.
Примечание 5 - Адаптированное определение по ИСО 11843-5:2008.
4 Количественный анализ и фоновый шум
4.1 Источники ошибок при анализе
Количественный анализ процедуры получения значения измеряемой величины, как правило, включает подготовку пробы (выборки), инструментальный анализ, обработку данных и калибровку. Эти этапы анализа технически не зависят друг от друга как процедурно, так и в вероятностном смысле.
В настоящем стандарте рассмотрен только инструментальный анализ. Однако ошибки других этапов также влияют на конечное значение измеряемой величины. Таким образом, суммарная неопределенность оценки измеряемой величины зависит от неопределенностей соответствующих этапов. Для использования настоящего стандарта необходимо выполнение следующих условий.
Если значение содержания вещества близко к минимальному обнаруживаемому значению в хроматографии, то ошибка, соответствующая вводимой в хроматограф пробе, менее значима (например, коэффициент вариации CV=0,3% в современном аппарате), чем фоновый шум (CV=30% по определению). Если влияние другого фактора (не шума) сопоставимо с влиянием шума, методы настоящего стандарта не применимы.
Обработка данных - процесс, направленный на выделение из общего инструментального шума таких параметров сигнала, как высота или площадь пика (относительная высота вершины пикобразного сигнала или интеграл интенсивности по области сигнала, соответственно). В настоящем стандарте приведен метод статистического анализа влияния этого процесса на неопределенность результатов измерений. Использование цифрового или аналогового фильтра также может быть учтено при выполнении анализа шума после фильтрации.
4.2 Случайный процесс фонового шума
Спектр мощности P(f) шума 1/f имеет угловой коэффициент, обратно пропорциональный частоте
где f близко к нулю.
5 Теория прецизионности
5.1 Теория, основанная на функции автоковариации
Теория, предложенная Вайнефорднером (см. [2], [3], [4]), основана на функции автоковариации
|
Рисунок 1 - Сигнал (верхняя линия) и шум (нижняя линия) с различными интенсивностями
|
Рисунок 2 - Функция автоковариации шума
Можно использовать теорему Винера-Хинчина (см. [5]), которая связывает функцию автоковариации со спектральной плотностью мощности (спектром мощности) через преобразование Фурье
G(f) - частотная характеристика (линейной) системы считывания данных.
Формула (8) показывает, как оценить стандартное отклонение (см. формулу (7)) на основе спектра мощности шума.
5.2 Теория, основанная на спектре мощности
Теория, основанная на спектре мощности базовой линии, или теория FUMI (функции взаимной информации) (см. [6], [7], [8]), дает возможность вычислять стандартное отклонение измеренных площади и высоты пика при инструментальном анализе. Измеренные значения представляют собой суммарную интенсивность выходных данных измерительного прибора по заданной области, как показано на рисунке 3. Если сигнал (форма и размер) является инвариантным, ошибка при измерении площади или высоты пика связана только с шумом и равна площади (высоте), соответствующей шуму в заданной области. Таким образом, ошибка измерений характеризуется площадью (высотой) пика, соответствующей шуму. Стандартные отклонения площади (высоты) пика шума, совпадают со стандартными отклонениями измеренных площади (высоты) пиков.
|
Z - нулевая область (область отсутствия сигнала); S - область сигнала; I - область наложения сигнала и шума; (остальные обозначения см. в приложении А)
Рисунок 3 - Сигнал и шум в нулевой области и области наложения сигнала и шума
|
Площадь области между случайной траекторией процесса "сигнал плюс шум" и горизонтальной линией в заданной области можно записать в виде:
Обоснование формул (14) и (15) приведено в приложении С. Минимальное обнаруживаемое значение может быть получено подстановкой формулы (13) в формулу (2).
Влияние объединения сигналов в установленной области принимает вид (см. [6], [7], [8]):
b - количество последовательных данных (точек) в нулевой области [-b + 1, 0].
Пять членов в формуле (15) обозначают следующие стохастические вклады в неопределенность измерений:
- четвертый член: влияние белого шума при наклонной базовой линии;
- пятый член: влияние Марковского процесса при наклонной базовой линии.
6 Практическое применение теории FUMI
6.1 Оценка параметров шума
где N - количество наблюдений, включенных в область преобразования Фурье;
j - мнимая единица.
Если принять модель шума, описанную формулой (9), спектральная плотность мощности в формуле (19) может быть описана (см. [6], [7], [8]) следующей формулой:
|
Рисунок 5 - Спектральная плотность мощности смоделированного шума
На практике спектральная плотность мощности сигнала является обычно менее гладкой, чем показанная на рисунке 5. При обработке реальных наблюдений обычно наблюдаются небольшие отклонения от гладкой кривой.
6.2 Процедуры оценки стандартного отклонения
При применении теории FUMI для определения оценки стандартного отклонения в области выполнения измерений необходимы выходные данные измерительного прибора, что в свою очередь позволяет определить минимальное обнаруживаемое значение. Полный набор этапов вычислений показан на рисунке 6.
На третьем этапе методом наименьших квадратов подбирают теоретическую кривую [формула (20)] для спектральной плотности мощности, как упомянуто выше. При небольшом количестве данных в области быстрого преобразования Фурье (например, 32) в некоторых случаях появляется смещение оценок параметров шума.
Параметры сигнала и шума, определенные как упомянуто выше, подставляют в формулы (13)-(16) для получения окончательного значения в соответствии с теорией FUMI (точности).
Применимость теории FUMI довольно широка, но существуют две ситуации, в которых она не применима:
- основным источником погрешности не является фоновый шум. В масс-спектроскопии, если процесс ионизации дает намного большую погрешность, чем шум, теория FUMI дает заниженное значение стандартного отклонения в области измерений;
- если фактический инструментальный шум включает шум, который не может быть успешно аппроксимирован объединенным процессом белого шума и Марковского процесса. Пример - шум высокой интенсивности.
Минимальное обнаруживаемое значение может быть найдено графически на основе показателей прецизионности, как приведенная переменная состояния, в которой коэффициент вариации приведенной переменной состояния составляет 30%. Этот метод также применим для коэффициента вариации переменной отклика, так как функция прецизионности приведенной переменной состояния идентична таковой для переменной отклика, если калибровочная функция линейна (см. [9], [10]). В случае нелинейной калибровочной функции, функции прецизионности переменной отклика и приведенной переменной состояния различны. В этом случае для преобразования различных функций прецизионности и оценки минимального обнаруживаемого значения применяют метод, установленный в ИСО 11843-5.
Таблица 1 - Пример оценки параметров шума в хроматофграфии (см. [6])
|
|
|
|
Эксперимент | |||
Эксперимент А | 14 | 3,7 | 0,99 |
Эксперимент В | 12 | 9,0 | 0,94 |
Эксперимент С | 14 | 5,6 | 0,99 |
|
Рисунок 6 - Процедуры теории FUMI
Приложение А
(справочное)
Обозначения и сокращения
|
|
|
SD | - | стандартное отклонение; |
CV | - | коэффициент вариации (SD, деленное на среднее); |
Х | - | приведенная переменная состояния; |
Y | - | переменная отклика (измеренные площадь или высота пика); |
- | i -ое значение времени из ряда , , ...; | |
- | отрезок времени ( ) аналого-цифрового преобразования при сборе данных; | |
- | интенсивность выходных данных прибора в момент времени (сумму обозначают Y ); | |
- | интенсивность выходных данных прибора t (сумму обозначают Y ); | |
- | минимальное обнаруживаемое значение приведенной переменной состояния; | |
- | коэффициент для определения вероятности ошибки первого рода; | |
- | коэффициент, используемый для определения вероятности ошибки второго рода; | |
- | SD переменной отклика как функция X; | |
- | SD приведенной переменной состояния как функция X; | |
- | производная калибровочной функции (абсолютная величина); | |
- | среднее (математическое ожидание) случайной величины, указанной в квадратных скобках; | |
- | функция автоковариации с запаздыванием , определенная по формуле (5); | |
- | значение случайной величины белого шума со средним, равным нулю и SD, равным , в точке i ; | |
- | SD белого шума ; | |
- | значение случайной величины Марковского процесса в точке i; | |
- | белый шум, включенный в Марковский процесс, в точке i, определенный формулой (4); | |
- | SD белого шума m , включенного в Марковский процесс; | |
- | отношение, используемое для сохранения предыдущего состояния, определенного формулой (4); | |
- | созданная шумом площадь (без сигнала); | |
FUMI | - | функция взаимной информации. |
Приложение В
(справочное)
Обоснование формулы (7)
В соответствии с определением функции автоковариации [формула (5)] второй член в правой части формулы (B.1) может быть записан в виде:
Предположение о стационарности фонового шума уравнивает первый и второй члены правой части формулы (B.1)
Под предположением о стационарности шума следует понимать, что дисперсия фонового шума является постоянной во времени. Тогда формулу (B.1) можно записать в виде:
Учитывая определение автоковариации [формула (5)], из (B.4) можно получить формулу (7).
Приложение С
(справочное)
Обоснование формул (14)-(16)
Основное предположение при выводе формул (14)-(16) состоит в том, что случайные величины белого шума являются статистически независимыми:
где формула (С.5) справедлива при любом условии. Все расчеты в данном приложении сделаны для наклонной базовой линии, но для горизонтальной базовой линии они также справедливы.
Сумму Марковского процесса можно записать в виде:
Тогда уравнение принимает простой вид
Поэтому, неопределенность, связанная с установкой нуля, имеет вид:
Приложение ДА
(справочное)
Сведения о соответствии ссылочных международных стандартов национальным стандартам
Таблица ДА.1
|
|
|
Обозначение ссылочного международного стандарта | Степень соответствия | Обозначение и наименование соответствующего национального стандарта |
ISO 11843-1:1997 | IDT | ГОСТ Р ИСО 11843-1-2007 "Статистические методы. Способность обнаружения. Часть 1. Термины и определения"
|
ISO 11843-2:2000 | IDT | ГОСТ Р ИСО 11843-2-2007 "Статистические методы. Способность обнаружения. Часть 2. Методология в случае линейной калибровки"
|
ISO 11843-5:2008 | IDT | ГОСТ Р ИСО 11843-5-2012 "Статистические методы. Способность обнаружения. Часть 5. Методология в случаях линейной и нелинейной калибровки"
|
ISO 3534-1 | - | * |
ISO 3534-2 | - | * |
ISO 3534-3 | - | * |
ISO 5725-1 | IDT | ГОСТ Р ИСО 5725-1-2002 "Точность (правильность и прецизионность) методов и результатов измерений. Часть 1. Основные положения и определения"
|
* Соответствующий национальный стандарт отсутствует. До его принятия рекомендуется использовать перевод на русский язык данного международного стандарта.
Примечание - В настоящей таблице использовано следующее условное обозначение степени соответствия стандартов:
- IDT - идентичные стандарты.
| ||
Библиография
[1] Ingle J.D. Jr. and S.R.Crouch. Spectrochemical Analysis. Prentice-Hall, Inc., New Jersey, 1988
[2] Alkemade C.Th.J., W.Snelleman, G.D.Boutilier, B.D.Pollard, J.D.Winefordner, T.L.Chester and N.Omenetto. A review and tutorial discussion of noise and signal-to-noise ratios in analytical spectrometry-l. Fundamental principles of signal-to-noise ratios. Spectrochim. Acta, 33B, pp. 383-399, 1978
[3] Boutilier G.D., B.D.Pollard, J.D.Winefordner, T.L.Chester and N.Omenetto. A review and tutorial discussion of noise and signal-to-noise ratios in analytical spectrometry-lI. Fundamental principles of signal-to-noise ratios. Spectrochim. Acta, 33B, pp. 401-415, 1978
[4] Alkemade C.Th. J., W.Snelleman, G.D.Boutilier and J.D.Winefordner. A review and tutorial discussion of noise and signal-to-noise ratios in analytical spectrometry-lll. Multiplicative noises. Spectrochim. Acta, 35B, pp. 261-270, 1980
[5] Hino M. Spectral Analysis (Supekutoru Kaiseki). Asakura Shoten, Tokyo, 1982
[6] Hayas hi Y. and R.Matsuda. Deductive prediction of measurement precision from signal and noise in liquid chromatography. Anal. Chem., 66(18), pp. 2874-2881, 1994
[7] Hayas hi Y. and R.Matsuda. Prediction of precision from signal and noise measurement in liquid chromatography: Mathematical relation ship between integration domain and precision, Chromatographia, 41, pp. 75-83, 1995
[8] Рое R.B., Y.Hayas hi and R.Matsuda. Precision-optimization of wavelengths in diode-array detection in separation science. Anal. Sci., 13, pp. 951-962, 1997
[9] Kotani A., Y.Yuan, B.Yang, Y.Hayas hi, R.Matsuda and F.Kusu. Selection of the optimal solvent grade for the mobile phase in HPLC with electrochemical detection based on FUMI theory. Anal. Sci., 25, pp. 925-929, 2009
[10] Kotani A., S.Kojima, Y.Hayas hi, R.Matsuda and F.Kusu, Optimization of capillary liquid chromatography with electrochemical detection for determining femtogram levels of baicalin and baicalein on the basis of the FUMI theory. J. Pharm. Biomed. Anal., 48, pp. 780-787, 2008
|
|
УДК 658.562.012.7:65.012.122:006.354 | ОКС 03.120.30 |
|
|
Ключевые слова: измерение, отклик, стандартное состояние, базовое состояние, приведенная переменная состояния, калибровка, критическое значение отклика, ошибка первого рода | |
Бытовые и аналогичные электрические приборы. Безопасность. Часть 2-79. Частные требования к очистителям высокого давления и пароочистителям
Производство нанотехнологическое. Контроль основных характеристик. Часть 2-1. Материалы из углеродных нанотрубок. Методы определения поверхностного сопротивления
Услуги средств размещения. Общие требования к хостелам
Трубы стальные бесшовные и сварные. Часть 10. Ультразвуковой метод автоматизированного контроля для обнаружения продольных и (или) поперечных дефектов по всей поверхности
Трубы стальные бесшовные и сварные. Часть 8. Ультразвуковой метод автоматизированного контроля для обнаружения расслоений