НовостьНейросетиAWSSageMaker

AWS добавила в SageMaker подготовку данных с ИИ — синтетику, авторазметку и проверку человеком

Amazon SageMaker получил инструменты для создания синтетических примеров, автоматической разметки и очистки датасетов. Доступ — через Python SDK или официальный навык AWS для AI-агентов, пока в двух регионах США.

Ирина Видяшкина

18.11.2026 · 3 минут чтения · Нейросети

Aws Sagemaker AI Data Preparation Synthetic Labeling Cover

Содержание

От исходных документов до обучающей выборки

Amazon SageMaker получил новые возможности подготовки данных с ИИ: генерацию синтетических примеров, автоматическую разметку, оценку качества и преобразование наборов данных. Разработчикам они доступны через SageMaker Python SDK и официальный AWS AI-ML skill в Agent Toolkit for AWS. На старте поддерживаются два региона — Северная Вирджиния и Орегон.

Один набор инструментов для нескольких этапов

Генератор синтетических данных создаёт обучающие, оценочные и тестовые примеры по заданной спецификации, опираясь на документы команды. Это отличается от генерации произвольного корпуса: исходные материалы задают предметную область будущей выборки.

После генерации или загрузки данных можно оценить их качество. SageMaker находит дубликаты и выявляет проблемы, включая неподходящий тон и недостаточное разнообразие. Для проверки используются метрики и правила. Отдельные операции преобразования позволяют удалять дубликаты, фильтровать записи и менять формат под выбранный способ обучения или оценки модели.

Авторазметка не исключает эксперта

Встроенные задачи разметки включают классификацию, распознавание именованных сущностей, извлечение ответов на вопросы, оценку по порядковой шкале и суммаризацию. Поддерживаются и пользовательские задачи. Вместе с метками система возвращает оценки уверенности.

Записи ниже порога, заданного командой, направляются в очередь проверки человеком — через Label Studio Community Edition в SageMaker AI Studio. Например, в корпусе обращений можно автоматически размечать типовые записи, а неоднозначные случаи оставлять специалистам. Оценка уверенности здесь служит механизмом маршрутизации, а не доказательством правильности каждой метки.

Где хранятся результаты

По сообщению AWS, исходные данные, сгенерированные наборы и метки остаются в собственных бакетах Amazon S3 заказчика. Доступ контролируется IAM-ролью, которой управляет команда. Это не отдельный публичный сервис для загрузки файлов без настройки облачного окружения, а часть рабочего процесса SageMaker.

Где попробовать

Возможности уже доступны в us-east-1 и us-west-2. Для работы нужны AWS-аккаунт, настроенные права доступа и собственное окружение SageMaker. Программный маршрут — SageMaker Python SDK; вариант с запросами на естественном языке — актуальный AWS AI-ML skill из официального Agent Toolkit for AWS.

Заявленный географический охват ограничен двумя регионами США: анонс не подтверждает доступность этих возможностей в европейских или других регионах AWS.

Как подготовить первый набор данных

Выберите поддерживаемый регион

Настройте рабочее окружение SageMaker в us-east-1 или us-west-2 и IAM-роль с доступом к нужным данным.

Определите источник и место для результатов

Подключите документы или существующие данные из Amazon S3, Amazon Athena либо AWS Glue Data Catalog. Укажите собственный бакет S3 для выходных наборов.

Сформулируйте задание

Используйте SageMaker Python SDK или актуальный AWS AI-ML skill. Задайте спецификацию синтетических примеров либо правила и тип задачи автоматической разметки.

Отделите спорные записи от готовых

Задайте порог уверенности для разметки и проверьте направленные человеку записи в Label Studio Community Edition внутри SageMaker AI Studio. Перед обучением оцените качество итогового набора.

Вопросы о подготовке данных в SageMaker

AWS разрешает начинать с нескольких примеров, производственных трасс или уже существующих данных. Для синтетической генерации используется спецификация с опорой на ваши документы.

Хочешь узнавать первым о таких новостях?

Переходи в наш телеграм канал где мы ежедневно публикуем самые свежие и интересные новости

Хочешь узнавать первым о таких новостях?

Переходи в наш телеграм канал где мы ежедневно публикуем самые свежие и интересные новости

Чиби Новости