AIMultiple стремится помочь покупателям выбрать подходящего помощника по письму для своего бизнеса.
Первый тест AIMultiple для писателей с искусственным интеллектом призван помочь маркетинговым командам выбрать помощника по письму, который лучше всего соответствует потребностям их бизнеса. Бенчмарк будет оценивать следующие аспекты:
- Для получившихся статей:
- Читабельность
- Правдивость
- Правильное использование английского языка и грамматики
- Je ne sais quoi (насколько привлекательна статья)
- Обслуживание клиентов
- Общая стоимость владения
Каковы будут руководящие принципы?
Методология сравнительного анализа AIMultiple предназначена для объективной и прозрачной оценки. В нем также разъясняются требования к участию.
Что будет бенчмаркироваться?
AIMultiple будет делиться подсказками пользовательского интерфейса, предоставленными помощниками по написанию ИИ, и оценивать полученные статьи.
Что такое эталонный набор данных?
Команда AIMultiple создаст 50 подсказок. 25 будут ориентированы на B2C, а 25 — на B2B. Они будут представлять собой смесь статей из нижней части воронки, из верхней части воронки и из середины воронки.
Что требуется от помощника по письму с искусственным интеллектом?
Полная статья должна быть возвращена в течение 5 минут после получения подсказки.
Как AIMultiple будет выполнять тест?
Тест помощника по письму AIMultiple направлен на точное соответствие предпочтениям покупателей. Им нужно решение, предоставляющее статьи такого качества, которое максимально близко к публикации. Поэтому AIMultiple будет измерять следующие показатели:
- Для полученных статей отраслевые аналитики из команды AIMultiple, имеющие большой опыт написания статей в Интернете, будут оценивать статьи с точки зрения этих показателей по 10-балльной шкале. Каждый оценщик должен создавать онлайн-статьи, которые посещают тысячи посетителей в месяц по конкурентным темам. Результаты будут представлять собой среднее значение оценок 5 оценщиков по следующим параметрам:
- Je ne sais quoi (насколько привлекательна статья)
- Правильное использование английского языка и грамматики будет измеряться для каждого поставщика путем подсчета количества ошибок. AIMultiple поделится соотношением грамматических ошибок/1000 слов для каждого решения.
- Обслуживание клиентов: отзывы на платформах отзывов B2B будут проанализированы для оценки удовлетворенности клиентов.
- Скорость: если есть существенные различия в скорости между поставщиками, это будет выделено.
- Другие особенности
- Общая стоимость владения: общедоступные данные о затратах, опубликованные поставщиками, будут использоваться для расчета стоимости эталонного теста. Модель затрат поставщиков также будет предоставлена, чтобы помочь покупателям сравнивать цены разных поставщиков.
Как будут опубликованы результаты?
Они будут опубликованы на AIMultiple.com и будут содержать графики, которые пользователи смогут использовать для поиска подходящего поставщика для своего бизнеса. Различные показатели (например, ручная работа) будут представлены отдельно, чтобы обеспечить прозрачность для покупателей.
Каждый участник получит свои подробные результаты, а также средние результаты.
Проблемы
Писатели обычно используют вывод ИИ-помощника в качестве отправной точки, а не конечного продукта. Эти тесты предназначены для измерения качества этого исходного продукта. Также было бы интересно узнать, как помощник ИИ поддерживает процесс письма. Однако измерение предпочтений писателей в процессе написания внесло бы в процесс больше субъективности, и поэтому мы не будем рассматривать это в данной оценке.
Обратите внимание, что AIMultiple находится на этапе разработки эталонного теста, и изменения будут внесены по мере того, как AIMultiple получит отзывы конечных пользователей и завершит тест.
Свяжитесь с командой AIMultiple по (электронная почта защищена), если вы хотите принять участие в тесте AIMultiple AI Writer.
Поделись LinkedIn