DGrid AI опубликовала последнюю исследовательскую работу PoQ-Judge, завершив замкнутый цикл оценки качества децентрализованных LLM с помощью многоархитектурной оценочной рамки
Сообщение ChainCatcher, децентрализованная сеть AI инфраструктуры DGrid AI сегодня выпустила последнее исследование "PoQ-Judge", предложив набор многоархитектурной оценки качества без необходимости в эталонных ответах. Это означает, что в реальных условиях развертывания часто нет стандартных ответов для сравнения, и протокол все равно может надежно оценивать качество ответов модели и на основе этого распределять стимулы. Это ключевой элемент, который долго отсутствовал в системе оценки качества вывода децентрализованного LLM DGrid.PoQ (Proof of Quality, доказательство качества) — это собственный механизм консенсуса DGrid, предназначенный для предотвращения предоставления поставщиками моделей низкокачественных моделей, подделки данных или скрытия вычислительных затрат на уровне протокола, тем самым обеспечивая качество обслуживания и прозрачность ценообразования. Команда DGrid продолжает углубленную работу вокруг PoQ и уже опубликовала четыре исследования. В выпущенном PoQ-Judge были обучены три модели оценки, охватывающие различные сценарии качества и стоимости, которые продемонстрировали максимальную корреляцию с ручной оценкой до 0.747 на тестовом наборе, что значительно превосходит все предыдущие оценщики, основанные на эталонных ответах, при этом через каскадную оценку и онлайн-калибровку весов удалось снизить затраты на оценку более чем на 72%.С внедрением PoQ-Judge весь процесс от оценки качества → оценки → распределения стимулов полностью освободился от зависимости от эталонных ответов, что открывает замкнутый цикл качества вывода децентрализованного LLM.DGrid AI — это децентрализованная сеть AI, стремящаяся создать открытую, прозрачную и управляемую сообществом инфраструктуру AI. Вокруг вызова моделей и пользовательского опыта DGrid уже выпустила несколько ключевых продуктов: AI Gateway, который объединяет глобальные основные большие модели, платформу развертывания AI-агентов DClaw, анонимную платформу соревнований моделей AI Arena и помощника по рекомендациям интеллектуальных моделей Dori, предоставляя разработчикам и пользователям комплексные услуги. По сообщениям, выручка DGrid AI за полгода превысила 20 миллионов долларов.
