Сравнительные испытания: своя продукция против аналогов
Сравнительные испытания проводят, когда нужно не подтвердить соответствие норме, а показать различие: своя продукция против аналога, новая рецептура против прежней, отечественный материал против импортного. Задача выглядит простой, но именно здесь чаще всего получают результат, который невозможно защитить: образцы отобраны по-разному, условия отличались, разница оказалась в пределах погрешности метода, а вывод сформулирован шире, чем позволяют данные. Между тем корректно проведённые сравнительные испытания — сильный аргумент в тендере, в переговорах с сетью и при обосновании замены импортного материала. Ниже — как построить сравнение, чтобы его нельзя было оспорить, и какие выводы из него допустимо публиковать.
01
Задачи сравнительных испытаний
- подтвердить преимущество своей продукции по конкретным показателям;
- обосновать замену импортного материала отечественным;
- выбрать поставщика сырья или комплектующих;
- оценить последствия изменения рецептуры или конструкции;
- подтвердить эквивалентность аналога при импортозамещении;
- подготовить аргументацию для тендера или закупочной процедуры;
- проверить обоснованность заявлений конкурента;
- выбрать направление доработки продукта.
02
Условия корректного сравнения
- Единая программа: один и тот же перечень показателей для всех объектов.
- Единые методы: тот же стандарт, та же аппаратура, тот же оператор.
- Единые условия: температура, влажность, подготовка образцов.
- Одинаковый порядок и способ отбора образцов.
- Сопоставимые объекты: одно назначение, один класс, близкие параметры.
- Равное число образцов по каждому объекту.
- Одновременное или последовательное проведение без разрыва в условиях.
- Обезличивание образцов для методов с субъективной оценкой.
- Оценка разброса внутри каждого объекта, а не только средних значений.
03
Отбор образцов конкурентов
- образцы приобретаются в свободной продаже, а не запрашиваются у изготовителя;
- фиксируются место, дата покупки и документ, подтверждающий приобретение;
- проверяются срок годности и целостность упаковки;
- отбираются образцы из одной партии или из разных — по задаче;
- фиксируется маркировка: партия, дата изготовления, изготовитель;
- образцы хранятся в условиях, указанных на упаковке, до передачи в лабораторию;
- часть образцов сохраняется как контрольная;
- передача в лабораторию оформляется актом с описанием состояния.
04
Статистическая значимость
| Ситуация | Что можно утверждать |
|---|---|
| Разница меньше погрешности метода | Различий не обнаружено |
| Разница сопоставима с разбросом внутри объекта | Различие не подтверждено |
| Разница устойчиво превышает разброс и погрешность | Различие подтверждено по данному показателю |
| Разница подтверждена на одной партии | Вывод о партии, не о продукции в целом |
| Разница подтверждена на нескольких партиях | Вывод о продукции при представительной выборке |
| Разница по одному показателю | Вывод только по этому показателю |
05
Методы, где сравнение особенно требовательно
- органолептические: обязательны шифрование и случайный порядок подачи;
- испытания на срок годности: объекты должны храниться в одинаковых условиях;
- ресурсные испытания: одинаковая нагрузка и режим для всех объектов;
- испытания на износ: одинаковые контртела и абразив;
- испытания покрытий: одинаковая подготовка основы;
- испытания на коррозию: одновременная экспозиция в одной камере;
- энергетические характеристики: одинаковые условия питания и нагрузки;
- испытания с участием людей: обезличивание и рандомизация.
06
Оформление результатов
- перечень объектов сравнения с полной идентификацией;
- сведения об отборе образцов: место, дата, документ приобретения;
- единая программа с указанием методов и стандартов;
- условия проведения, единые для всех объектов;
- результаты по каждому образцу, а не только средние значения;
- оценка разброса и погрешности метода;
- вывод по каждому показателю с указанием статистической обоснованности;
- явное указание границ применимости вывода;
- фотографии образцов и, при необходимости, состояния после испытаний.
07
Использование результатов
| Применение | Что допустимо | Ограничение |
|---|---|---|
| Тендер и закупка | Протокол с сопоставлением по требуемым показателям | Показатели должны совпадать с требованиями закупки |
| Переговоры с сетью | Сравнение по потребительски значимым показателям | Формулировки не должны выходить за данные |
| Обоснование импортозамещения | Подтверждение эквивалентности по критичным показателям | Требуется полный перечень критичных показателей |
| Внутренние решения по продукту | Любые сравнения | Ограничений нет, кроме корректности методики |
| Реклама и публичные заявления | Сравнение с указанием показателя, метода и условий | Нельзя обобщать вывод и упоминать конкурента некорректно |
| Спор с конкурентом | Протокол аккредитованной лаборатории | Требуется безупречный отбор образцов |
08
Типовые ошибки
- сравнение продукции разных классов и ценовых сегментов;
- образцы конкурента, полученные не в свободной продаже;
- разные условия испытаний для разных объектов;
- разное число образцов по объектам;
- вывод по средним значениям без учёта разброса;
- разница в пределах погрешности метода, поданная как преимущество;
- обобщение вывода с показателя на продукцию целиком;
- органолептическое сравнение без шифрования образцов;
- отсутствие акта отбора и документов приобретения.
09
Чек-лист
- Сформулировать задачу и допустимую широту вывода.
- Подобрать сопоставимые объекты одного класса и назначения.
- Приобрести образцы конкурентов в свободной продаже с документами.
- Составить единую программу с одинаковым перечнем показателей.
- Обеспечить единые методы, аппаратуру, оператора и условия.
- Задать равное число образцов по каждому объекту.
- Для субъективных методов предусмотреть шифрование и рандомизацию.
- Оценить разброс внутри объектов и погрешность метода.
- Сформулировать вывод по каждому показателю с границами применимости.
- Сохранить акт отбора, документы приобретения и контрольные образцы.
Частые вопросы
Что такое сравнительные испытания?
Испытания нескольких объектов по единой программе и в одинаковых условиях с целью выявить различия: своя продукция против аналога, новая рецептура против прежней, отечественный материал против импортного.
Главное условие корректности?
Полная идентичность программы, методов, аппаратуры и условий для всех объектов, а также сопоставимость самих объектов по назначению и классу.
Как отбирать образцы конкурентов?
Приобретать в свободной продаже с фиксацией места, даты и документа покупки. Образец, полученный от изготовителя, обесценивает сравнение.
Можно ли сравнивать продукцию разных классов?
Технически можно, но как аргумент это бессмысленно: разница объясняется классом продукции, а не решениями изготовителя, и легко оспаривается.
Сколько образцов нужно?
Равное число по каждому объекту, достаточное для оценки разброса — обычно не менее трёх-пяти. Сравнение по одному образцу на объект различия не доказывает.
Когда различие считается подтверждённым?
Когда разница устойчиво превышает и погрешность метода, и разброс внутри каждого объекта. Иначе корректная формулировка — «различий не обнаружено».
Можно ли по одной партии судить о продукции в целом?
Нет. Вывод по одной партии относится к партии. Для вывода о продукции нужна представительная выборка из нескольких партий.
Как формулировать вывод?
С указанием показателя, метода, объектов и условий. Обобщение «наш продукт лучше» по одному показателю на двух образцах — источник претензий.
Нужно ли шифровать образцы?
Обязательно для органолептических и любых методов с субъективной оценкой, а также для испытаний с участием людей. Иначе результат отражает ожидания.
Можно ли использовать результаты в рекламе?
Только при корректности и подтверждённости сравнения, с указанием показателя, метода и условий. Претензии рассматриваются по первичным документам — акту отбора и полному протоколу.
Годятся ли результаты для тендера?
Да, если сравнение выполнено по тем показателям, которые указаны в требованиях закупки, и подтверждено протоколом аккредитованной лаборатории.
Как обосновать импортозамещение?
Сравнением по полному перечню критичных показателей, а не по нескольким выгодным. Пропуск критичного показателя обесценивает вывод об эквивалентности.
Нужна ли аккредитованная лаборатория?
Для внутренних решений — нет. Для тендеров, публичных заявлений и споров с конкурентами — да, протокол аккредитованной лаборатории существенно устойчивее.
Обязательно ли сохранять контрольные образцы?
Практически да: при споре именно они позволяют повторить испытания и подтвердить исходные данные.
С чего начать?
С формулировки задачи и допустимой широты вывода. От неё зависят и число образцов, и требования к отбору, и то, как результат можно будет использовать.
Бесплатная консультация
Разберём ваш случай
Опишите товар и задачу — определим, какой документ нужен по техрегламентам, подберём схему подтверждения соответствия и назовём срок и стоимость до начала работ.
- Проверим, попадает ли товар под технические регламенты
- Подберём схему и состав испытаний под ваш код ТН ВЭД
- Скажем срок и стоимость до начала работ
- Проверим документы поставщика в реестре — без оплаты