Когда модели оценивают архитектуру: проблемы с рубрикой оценки, на которые стоит выделить бюджет

Использование моделей для оценки ответов по архитектуре — и где это терпит неудачу

Команды просят большие языковые модели проверять ответы о системной архитектуре так же, как это делал бы профессиональный архитектор. Идея кажется привлекательной: масштабирование процесса проверки, соблюдение критериев оценки, выявление недостатков. На практике оценщики устанавливают более строгие стандарты, чем используют инженеры, путают объём демонстрации проекта с его функциональными возможностями, принимают обоснованные, но абсурдные вопросы, оптимизируют предоставленные тесты вместо неопределённой цели и оставляют устаревшие ответы после изменения вопросов. Кроме того, они предпочитают банальные шаблонные формулировки, которые кажутся профессиональными, но по сути не содержат значимой информации.

Тестируемая система

В рамках исследования ответы кандидатов о конкретной системе сопоставлялись с проверкой большой языковой модели, которая использовала чек-листы для оценки корректности, наличия доказательств и соответствия объёмаусловиям. Человеческие архитекторы расходились во мнениях с моделью по определённым закономерностям, которые стоит задокументировать.

Неудача 1 — философская строгость

Инженеры работают в условиях неопределенности; модели стремятся к абсолютным определениям того, что считается «правильным». Дизайн, достаточно хороший в рамках существующих ограничений, подвергается критике за отсутствие доказательств метафизической оптимальности. Критерии оценки должны учитывать «подходящесть для поставленной цели», а не «истинность во всех возможных мирах».

Ошибка 2 — доказательство проекта против функциональных возможностей продукта

Если репозиторий доказывает работоспособность определенной части продукта, модели часто утверждают, что весь продукт уже обладает такими качествами. Оценщики должны разделять доказательства, касающиеся тестируемого продукта, и заявления, предназначенные для маркетинговых целей.

Ошибка 3 — имеющиеся доказательства, но абсурдные вопросы

Вопрос может ссылаться на файлы, но при этом оставаться неверным. Машины оптимизируются с учетом предоставленных тестов; люди замечают, когда тесты не отражают истинную цель. В критерии оценки необходимо включать проверку соответствия цели.

Ошибка 4 — исправление вопросов без переоценки ответов

Локальные изменения в запросах без глобальной семантической переоценки приводят к появлению «орфанских» ответов, которые больше не соответствуют запросу. Соблюдение чистоты процесса обработки: повышение версии вопроса и аннулирование кэшированных оценок.

Ошибка 5 — гравитация шаблонов

Модели генерируют правдоподобные тексты о архитектуре — «необходимо учитывать масштабируемость, безопасность, возможности отслеживания» — не учитывая реальные узкие места системы. Требуется указание конкретных компонентов, на которые ссылаются.

250000 Gbps

Принципы проектирования для проверки ИИ

• Критерии оценки с четко определенной толерантностью к прагматичному подходу в инженерии.
• Отдельные баллы за качество доказательств и соответствие вопросу требованиям.
• Банки вопросов с версионированием и обязательной переоценкой.
• Проверка человеком спорных случаев.
• Запрет на использование необоснованных общих советов при высокостепенных оценках.

Что все еще работает

LLM помогают выявлять отсутствующие разделы, неоднородную терминологию и отсутствующие диаграммы при наличии соответствующих данных. Они являются помощниками архитекторов, но не заменой их собственного суждения относительно целей проекта.

Системы ИИ, проверяющие другие системы ИИ, терпят неудачу, когда тесты упускают из виду человеческую цель архитектуры — принятие решений в условиях ограничений. Необходимо создавать инструменты проверки, учитывающие эти ограничения, иначе они накажут именно ту инженерную проницательность, за которую вы их нанимаете.

Если вы используете инструменты оценки на основе LLM во время собеседований или при подготовке документов для продвижения по службе, публикуйте критерии оценки среди кандидатов, если это допускается этически, вовлекайте людей при принятии решений по крайне сомнительным результатам и меняйте вопросы, чтобы модели не могли запомнить простые ответы. Ежеквартально отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками квалифицированных людских комиссий.

Проверка архитектуры — это социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии эксплуатации, систематически недооценивают специалистов, которые правильно оптимизируют решения с учетом этих неуказанных факторов. Необходимо кодировать эти переменные или перестать притворяться, что система оценки нейтральна.

Другие способы сбоев, на которые стоит выделить бюджет

Сбой 6: оценка излишней подробности как проявления строгости. Сбой 7: наказание за использование терминов, характеризующих неопределенность, которые эксперты применяют правильно. Сбой 8: поощрение упоминания фреймворков, не связанных с системой. Сбой 9: игнорирование операционных доказательств, таких как руководства по эксплуатации и показатели качества. Сбой 10: изменение критериев оценки между разными проверками без уведомления.

Для каждого способа сбоя существует способ минимизации: лимиты длины текста, баллы за учет неопределенности, фильтры релевантности, требования к операционным доказательствам и контрольные суммы критериев оценки в записях о результатах.

Практический план действий

Начните с ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверяйте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку при условии обязательного проверки человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели, не прошедшей проверку.

Глубокая настройка согласованности

Архитектура создается для достижения целей заинтересованных сторон в условиях ограничений. Проверщик, который не может указать эти цели, будет блестяще оценивать неверные вещи. Требуйте указания целей в каждом наборе вопросов. Требуйте, чтобы ответ содержал перечисление целей перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организации

Проводите внутренние проверки дизайна перед тем, как кандидаты попадут в цикл оценки. Измеряйте экономию времени по сравнению с коэффициентом обжалований. Обеспечьте возможность подачи апелляции, которая быстро достигнет человека-архитектора. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменении технологической стека — поставщиков облачных услуг, регламентов соответствия или характеристик трафика.

Итоги

Инструменты проверки LLM повышают качество критериев оценки. Слабые критерии при масштабировании усиливают слабости. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс проверки. Упомянутые выше проблемы не являются основаниями для отказа от инструментов; они представляют собой рекомендации по их использованию без самообмана.

Дополнительные рекомендации для платформы и процесса найма

Если вы используете инструменты оценки на основе больших языковых моделей в процессе собеседований или при подготовке документов для продвижения по службе, публикуйте критерии оценки среди кандидатов там, где это допускается этически, вовлекайте людей при оценке результатов на грани допустимого, а также меняйте вопросы, чтобы модели не могли запомнить простые ответы. Каждый квартал отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками профессиональных комиссий из людей.

Проверка архитектуры представляет собой социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии работы, будут систематически неправильно оценивать специалистов, которые правильно оптимизируют свою работу с учетом этих неуказанных факторов. Необходимо учитывать эти факторы или перестать притворяться, что инструмент оценки нейтрален.

Другие способы сбоев, на которые стоит выделить бюджет

Ошибка 6: оценка чрезмерной подробности как признака строгости. Ошибка 7: наказание за использование языка неопределенности, который эксперты применяют правильно. Ошибка 8: поощрение упоминания фреймворков, не связанных с системой. Ошибка 9: игнорирование операционных доказательств, таких как руководства по эксплуатации и показатели качества обслуживания. Ошибка 10: изменение критериев оценки между этапами без уведомления.

Для каждой проблемы существует способ ее устранения: лимиты длины, баллы за корректно оцененную неопределенность, фильтры релевантности, требования к операционным доказательствам и контрольные суммы критериев оценки в записях о баллах.

Практический план

Начните с эталонных ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверьте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку с обязательным проверком человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели без аудита.

Углубленный анализ согласованности целей

Архитектура существует для достижения целей заинтересованных сторон в условиях ограничений. Проверщик, который не может определить эти цели, сможет «отлично» оценить неверный вариант. В каждом пакете вопросов необходимо указывать формулировки целей. Ответ должен содержать повторение этих целей перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организации

Сначала проводите пилотные тесты на внутренних сессиях по оценке дизайна, прежде чем использовать этот подход в более масштабных процессах. Измеряйте экономию времени по сравнению с уровнем одобрения решений. Обеспечьте возможность подачи апелляции, которая быстро достигала бы человека-архитектора. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменении технологической стека — поставщиков облачных услуг, регламентов соответствия или характеристик трафика.

Итоги

Проверщики на основе LLM повышают качество критериев оценки. Слабые критерии приводят к усилению недостатков. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс рассмотрения. Упомянутые выше проблемы не являются основаниями для отказа от использования таких инструментов; они служат руководством для их применения без самообмана.

Дополнительные рекомендации для платформ и процессов найма

Если вы включаете оценщики на основе LLM в собеседования или пакеты документов для продвижения по службе, публикуйте критерии оценки среди кандидатов, если это допускается этически, вовлекайте людей в процесс принятия решений по крайне сомнительным результатам и меняйте вопросы, чтобы модели не могли запомнить простые ответы. Ежеквартально отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками квалифицированных человеческих экспертов.

Проверка архитектуры — это социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии эксплуатации, систематически недооценивают специалистов, которые правильно оптимизируют решения с учетом этих неуказанных факторов. Необходимо кодировать эти переменные или перестать притворяться, что система оценки нейтральна.

Другие способы сбоев, на которые стоит выделить бюджет

Сбой 6: оценка излишней подробности как проявления строгости. Сбой 7: наказание за использование терминов, характеризующих неопределенность, которые эксперты применяют правильно. Сбой 8: поощрение упоминания фреймворков, не связанных с системой. Сбой 9: игнорирование доказательств из практики эксплуатации, таких как руководства и показатели качества. Сбой 10: изменение критериев оценки между разными проверками без уведомления.

Для каждого способа сбоя существует способ минимизации: лимиты длины, баллы за учет неопределенности, фильтры релевантности, требования к доказательствам из практики эксплуатации и контрольные суммы критериев оценки в записях о результатах.

Практический план действий

Начните с ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверяйте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку при условии обязательного проверки человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели, не прошедшей проверку.

Глубокая настройка согласованности

Архитектура существует для достижения целей заинтересованных сторон в рамках установленных ограничений. Проверщик, который не может указать эти цели, будет блестяще оценивать неверные вещи. Требуйте указания целей в каждом наборе вопросов. Требуйте, чтобы ответ содержал перечисление целей перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организацию

Проводите внутренние проверки дизайна перед тем, как кандидаты попадут в цикл оценки. Измеряйте экономию времени по сравнению с коэффициентом обжалований. Обеспечьте возможность обжалования, позволяющую быстро связаться с человеком-архитектором. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменениях в инфраструктуре — поставщиках облачных услуг, регламентах соответствия или характере трафика.

Итоги

Инструменты проверки LLM повышают качество критериев оценки. Слабые критерии при масштабировании усиливают слабости. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс оценки. Упомянутые выше проблемы не являются основаниями для отказа от таких инструментов; они представляют собой рекомендации по их использованию без самообмана.

Дополнительные рекомендации для платформы и процесса найма

Если вы используете инструменты оценки на основе больших языковых моделей в процессе собеседований или при подготовке документов для продвижения по службе, публикуйте критерии оценки среди кандидатов там, где это допускается этически, вовлекайте людей при оценке результатов на грани допустимого, а также меняйте вопросы, чтобы модели не могли запомнить простые ответы. Каждый квартал отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками профессиональных комиссий из людей.

Проверка архитектуры представляет собой социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии работы, будут систематически неправильно оценивать специалистов, которые правильно оптимизируют свою работу с учетом этих неуказанных факторов. Необходимо учитывать эти факторы или перестать притворяться, что инструмент оценки нейтрален.

Другие способы сбоев, на которые стоит выделить бюджет

Ошибка 6: оценка чрезмерной подробности как признака строгости. Ошибка 7: наказание за использование языка неопределенности, который эксперты применяют правильно. Ошибка 8: поощрение упоминания фреймворков, не связанных с системой. Ошибка 9: игнорирование операционных доказательств, таких как руководства по эксплуатации и показатели качества обслуживания. Ошибка 10: изменение критериев оценки между этапами без уведомления.

Для каждой проблемы существует способ ее устранения: лимиты длины, баллы за корректно оцененную неопределенность, фильтры релевантности, требования к операционным доказательствам и контрольные суммы критериев оценки в записях о баллах.

Практический план

Начните с идеальных ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверьте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку с обязательным проверком человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели без аудита.

Углубленный анализ согласованности целей

Архитектура существует для достижения целей заинтересованных сторон в условиях ограничений. Проверщик, который не может определить эти цели, сможет блестяще оценить неверный вариант. В каждом пакете вопросов необходимо указывать формулировки целей. Ответ должен содержать повторение этих целей перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организации

Сначала проводите пилотные тесты на внутренних сессиях по оценке дизайна, прежде чем использовать этот подход в более масштабных процессах. Измеряйте экономию времени по сравнению с уровнем одобрения решений. Обеспечьте возможность обжалования, позволяющую быстро связаться с человеком-архитектором. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменении технологической стека — поставщиков облачных услуг, регламентов соответствия или характеристик трафика.

Итоги

Проверщики на основе LLM повышают качество критериев оценки. Слабые критерии приводят к усилению недостатков. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс рассмотрения. Упомянутые выше проблемы не являются основаниями для отказа от использования таких инструментов; они служат руководством для их применения без самообмана.

Дополнительные рекомендации для платформ и процессов найма

Если вы включаете оценщики на основе LLM в собеседования или пакеты документов для продвижения по службе, публикуйте критерии оценки среди кандидатов, если это допускается этически, вовлекайте людей в процесс принятия решений по крайне сомнительным результатам и меняйте вопросы, чтобы модели не могли запомнить простые ответы. Ежеквартально отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками квалифицированных людских комиссий.

Проверка архитектуры — это социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии эксплуатации, систематически недооценивают специалистов, которые правильно оптимизируют решения с учетом этих неуказанных факторов. Необходимо кодировать эти переменные или перестать притворяться, что система оценки нейтральна.

Другие способы сбоев, на которые стоит выделить бюджет

Сбой 6: оценка излишней подробности как проявления строгости. Сбой 7: наказание за использование терминов, характеризующих неопределенность, которые эксперты применяют правильно. Сбой 8: поощрение упоминания фреймворков, не связанных с системой. Сбой 9: игнорирование операционных доказательств, таких как руководства по эксплуатации и показатели качества. Сбой 10: изменение критериев оценки между разными проверками без уведомления.

Для каждого способа сбоя существует способ минимизации: лимиты длины текста, баллы за учет неопределенности, фильтры релевантности, требования к операционным доказательствам и контрольные суммы критериев оценки в записях о результатах.

Практический план действий

Начните с ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверяйте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку при условии обязательного проверения человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели, не прошедшей проверку.

Глубокая настройка согласованности

Архитектура создается для достижения целей заинтересованных сторон в условиях определенных ограничений. Проверщик, который не может указать эти цели, будет блестяще оценивать неверные вещи. Требуйте указания целей в каждом наборе вопросов. Требуйте, чтобы ответ содержал перечисление целей перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организацию

Проводите внутренние проверки дизайна перед тем, как кандидаты попадут в цикл оценки. Измеряйте экономию времени по сравнению с коэффициентом обжалований. Обеспечьте возможность подачи апелляции, позволяющую быстро связаться с человеком-архитектором. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменениях в инфраструктуре — поставщиках облачных услуг, регламентах соответствия или характере трафика.

Итоги

Инструменты проверки LLM повышают качество критериев оценки. Слабые критерии при масштабировании усиливают слабости. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс оценки. Упомянутые выше проблемы не являются основаниями для отказа от таких инструментов; они представляют собой рекомендации по их использованию без самообмана.

Дополнительные рекомендации для платформы и процесса найма

Если вы используете инструменты оценки на основе больших языковых моделей в процессе собеседований или при подготовке документов для продвижения по службе, публикуйте критерии оценки среди кандидатов там, где это допускается этически, вовлекайте людей при оценке результатов на грани допустимого, а также меняйте вопросы, чтобы модели не могли запомнить простые ответы. Каждый квартал отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками профессиональных комиссий из людей.

Проверка архитектуры представляет собой социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии работы, будут систематически неправильно оценивать специалистов, которые правильно оптимизируют свою работу с учетом этих неуказанных факторов. Необходимо учитывать эти факторы или перестать притворяться, что инструмент оценки нейтрален.

Другие способы сбоев, на которые стоит выделить бюджет

Ошибка 6: оценка чрезмерной подробности как признака строгости. Ошибка 7: наказание за использование языка неопределенности, который эксперты применяют правильно. Ошибка 8: поощрение упоминания фреймворков, не связанных с системой. Ошибка 9: игнорирование операционных доказательств, таких как руководства по работе и показатели качества. Ошибка 10: изменение критериев оценки между этапами без уведомления.

Для каждой проблемы существует способ ее устранения: лимиты длины, баллы за корректно оцененную неопределенность, фильтры релевантности, требования к операционным доказательствам и контрольные суммы критериев оценки в записях о баллах.

Практический план

Начните с идеальных ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверьте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку с обязательным проверком человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели без аудита.

Углубленный анализ согласованности целей

Архитектура существует для достижения целей заинтересованных сторон в условиях ограничений. Проверяющий, который не может определить эти цели, сможет блестяще оценить неверный вариант. В каждом пакете вопросов необходимо указывать формулировки целей. Ответ должен повторять эти цели перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организации

Сначала проводите пилотные тесты на внутренних сессиях по оценке дизайна, прежде чем использовать этот подход в более масштабных проектах. Измеряйте экономию времени по сравнению с уровнем одобрения решений. Обеспечьте возможность обжалования, позволяющую быстро связаться с человеком-архитектором. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменении технологической стека — поставщиков облачных услуг, регламентов соответствия или характеристик трафика.

Итоги

Проверщики на основе LLM повышают качество критериев оценки. Слабые критерии приводят к усилению недостатков. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс рассмотрения. Упомянутые выше проблемы не являются основаниями для отказа от использования таких инструментов; они служат руководством для их применения без самообмана.

Дополнительные рекомендации для платформ и процессов найма

Если вы включаете оценщики на основе LLM в собеседования или пакеты документов для продвижения по службе, публикуйте критерии оценки среди кандидатов, если это допускается этически, вовлекайте людей в процесс принятия решений по крайне сомнительным результатам и меняйте вопросы, чтобы модели не могли запомнить простые ответы. Ежеквартально отслеживайте показатели ложных отказов и ложных одобрений по сравнению с оценками квалифицированных человеческих экспертов.

Проверка архитектуры — это социотехнический процесс. Инструменты, которые игнорируют ограничения организации, бюджетные рамки и реалии эксплуатации, систематически недооценивают специалистов, которые правильно оптимизируют решения с учетом этих неуказанных факторов. Необходимо кодировать эти переменные или перестать притворяться, что система оценки нейтральна.

Другие способы сбоев, на которые стоит выделить бюджет

Сбой 6: оценка излишней подробности как проявления строгости. Сбой 7: наказание за использование терминов, характеризующих неопределенность, которые эксперты применяют правильно. Сбой 8: поощрение упоминания фреймворков, не связанных с системой. Сбой 9: игнорирование операционных доказательств, таких как руководства по эксплуатации и показатели качества. Сбой 10: изменение критериев оценки между разными тестированиями без уведомления.

Для каждого способа сбоя существует способ минимизации: лимиты длины текста, баллы за учет неопределенности, фильтры релевантности, требования к операционным доказательствам и контрольные суммы критериев оценки в записях о результатах.

Практический план действий

Начните с ответов, написанных людьми. Настройте модель так, чтобы она соглашалась с решениями по простым случаям. Проверяйте сложные спорные ситуации. Только после этого автоматизируйте первичную оценку при условии обязательного проверки человеком при превышении порога риска. Никогда не позволяйте непоправимому решению по кадрам основываться на оценке модели, не прошедшей проверку.

Глубокая настройка согласованности

Архитектура создается для достижения целей заинтересованных сторон в условиях ограничений. Проверщик, который не может указать эти цели, будет блестяще оценивать неверные вещи. Требуйте указания целей в каждом наборе вопросов. Требуйте, чтобы ответ содержал перечисление целей перед предложением структуры. Оценивайте взаимосвязь между целями и механизмами, а не только красноречие самих механизмов.

Внедрение в организации

Проводите внутренние проверки дизайна перед тем, как кандидаты пройдут процесс оценки. Измеряйте экономию времени по сравнению с коэффициентом обжалований. Обеспечьте возможность подачи апелляции, позволяющую быстро связаться с человеком-архитектором. Документируйте известные предубеждения модели. Переобучайте или заменяйте критерии оценки при изменениях в инфраструктуре — поставщиках облачных услуг, регламентах соответствия или характере трафика.

Краткое резюме

Инструменты проверки LLM повышают качество критериев оценки. Слабые критерии при масштабировании усиливают слабости. Сильные критерии в сочетании с человеческим надзором могут ускорить процесс проверки. Упомянутые выше проблемы не являются основаниями для отказа от таких инструментов; они представляют собой рекомендации по их использованию без самообмана.