Skip to main content

Fine-tuning data upload rules

Descreve as especificações de formato, requisitos de empacotamento, limites de tamanho e quantidade, além das cotas de upload via API para dados de ajuste fino de modelos de geração de texto. Este conteúdo auxilia na construção e no envio de dados de treinamento SFT/DPO/CPT em conformidade, organizados por método de treinamento.

Visão geral

Este documento descreve as especificações de formato, os requisitos de empacotamento, os limites de tamanho e quantidade e as cotas de upload via API para dados de ajuste fino de modelos de geração de texto. O escopo abrange o ajuste fino de modelos de geração de texto (texto/imagem/vídeo → texto), incluindo SFT/DPO/CPT em texto simples, compreensão de imagem e vídeo do Qwen VL, extração de quadros de vídeo, function calling e raciocínio (thinking). O ajuste fino de modelos de geração de vídeo (imagem → vídeo) está fora do escopo. O tipo de dataset (conjunto de treinamento ou conjunto de avaliação) não pode ser alterado após a criação. O suporte de cada método de treinamento e elemento está detalhado em Matriz de suporte a métodos de treinamento e elementos. As regras de construção de formato para cada combinação estão descritas nos capítulos correspondentes abaixo.
As operações a seguir são irreversíveis; prossiga com cautela:
  • Versões publicadas não podem ser editadas novamente; apenas versões em rascunho criadas anteriormente podem ser excluídas ou editadas online.
  • O tipo de dataset não pode ser alterado após a criação.
  • Alternar o tipo, o cenário ou o método de treinamento limpa os arquivos enviados.
Operações de gerenciamento (parâmetros de criação, gestão de versões, regras do conjunto de avaliação, seleção do método de importação, limpeza de dados, segurança e conformidade) são abordadas em documentos correlatos; consulte Conjunto de treinamento e conjunto de avaliação, Introdução ao ajuste fino de modelos, entre outros. Recomendamos baixar o modelo de dados correspondente ao cenário na página de criação do dataset e preparar os dados conforme a estrutura do modelo para evitar falhas de importação. Para obter recomendações sobre construção de datasets (escala de dados recomendada, diversidade e equilíbrio, estratégias de aumento de dados), consulte Introdução ao ajuste fino de modelos - Dicas de construção de datasets.

Matriz de suporte a métodos de treinamento e elementos

O conjunto de treinamento aceita três métodos de treinamento: SFT, DPO e CPT. O status de suporte de cada método de treinamento e elemento é mostrado na tabela de matriz abaixo. A ordem recomendada de ajuste fino é CPT (opcional) → SFT → DPO (opcional); os três são progressivos, não mutuamente exclusivos. Disponibilidade por região:
  • SFT, upload local, backflow de log, upload via API e formatos de dados multimodais são suportados em todas as regiões.
  • DPO, CPT, importação via OSS e montagem de armazenamento em nuvem são suportados apenas na região Beijing.
A matriz de suporte para métodos de treinamento e elementos é a seguinte:

Método de treinamento

Geração de texto

Compreensão visual - Entrada de imagem

Compreensão visual - Entrada de vídeo (qwen3.5+)

Compreensão visual - Tool calling (qwen3.5+)

Raciocínio profundo

SFT

✓

✓

✓

✓

✓

DPO

✓

✗

✗

✗

✓

CPT

✓

✗

✗

✗

✗

Conjunto de avaliação

✓

✗

✗

✗

✗

Cada método de treinamento cria novas versões no modo de criação de novos dados, exigindo a reimportação de todos os dados. Para as definições de campos dos métodos de treinamento SFT/DPO/CPT, consulte Introdução ao ajuste fino de modelos.

Geração de texto - Formato SFT

Os dados de treinamento SFT de geração de texto usam o formato de arquivo jsonl, baseado na estrutura multivolta ChatML messages.
  • Suporta três papéis: system, user e assistant. O campo content é uma string (para a estrutura de array content em cenários multimodais, consulte o capítulo correspondente ao formato multimodal).
  • O tamanho máximo de um único arquivo é 200 MB.
  • Um dataset pode misturar linhas de diferentes formatos — cada registro seleciona um formato de forma independente, sem necessidade de unificar em um único formato.
  • Formatos disponíveis: diálogo padrão, raciocínio profundo, chamada de ferramentas (tool calling) e chamada de ferramentas combinada com raciocínio (consulte as abas de exemplo abaixo).
O SFT de geração de texto suporta os seguintes formatos de amostra. A estrutura JSON completa de cada amostra é mostrada na aba correspondente:
  • Standard ChatML
  • Raciocínio profundo (thinking)
  • Function calling
Exemplo de formato ChatML padrão (diálogo multivolta system/user/assistant):
{
  "messages": [
    {"role": "system", "content": "系统输入1"},
    {"role": "user", "content": "用户输入1"},
    {"role": "assistant", "content": "期望的模型输出1"},
    {"role": "user", "content": "用户输入2"},
    {"role": "assistant", "content": "期望的模型输出2"}
  ]
}

Uso avançado

  1. O parâmetro loss_weight é suportado, com intervalo de valores de (0.0, 1.0]; quanto maior o valor, maior a importância deste registro durante o treinamento.
    Suportado por padrão nos modelos Qwen3.5 e posteriores; para habilitar o suporte nas séries Qwen3 e Qwen2.5, entre em contato com seu gerente de conta.
{"role": "assistant", "content": "期望的模型输出", "loss_weight": "1.0"}

Regras da tag de raciocínio

O conteúdo de raciocínio é envolvido pelas tags <think>\n…\n</think>\n\n e colocado dentro do texto de saída do assistant (compartilhando o mesmo último content do assistant que a resposta final). Regras:
  • Pode ser colocado apenas na última saída do assistant; saídas intermediárias do assistant não devem conter tags de raciocínio.
  • As quebras de linha antes e depois da tag de raciocínio devem ser preservadas.
  • Se uma amostra de treinamento for configurada para que o modelo não gere tags de raciocínio, não é recomendado reativar o modo thinking ao chamar o modelo após o treinamento.

Formato do conjunto de avaliação

O conjunto de avaliação atende apenas a cenários de geração de texto e é independente do método de treinamento SFT/DPO/CPT — modelos treinados com DPO/CPT também usam o conjunto de avaliação de geração de texto para avaliação, sem distinção por método de treinamento. O conjunto de avaliação suporta dois formatos de amostra, selecionados no cenário de treinamento do formato de dados ao criar o dataset:
  • Text generation (prompt&completion): formato de rodada única; cada amostra é composta por um Prompt (pergunta do usuário) e um Completion (resposta de referência). O upload local suporta apenas arquivos xls e xlsx (arquivo único de no máximo 20 MB); a estrutura de colunas pode ser consultada no modelo de dados fornecido pelo console.
  • Text generation (ChatML-messages): formato de conversa de múltiplas rodadas; cada amostra é um array messages composto por mensagens com os papéis system, user e assistant, sendo a resposta de referência a última mensagem assistant do messages. O upload local suporta arquivos jsonl, xls e xlsx (arquivo único de no máximo 200 MB); o arquivo de exemplo pode ser baixado ao criar o dataset.
No formato ChatML, cada linha é uma amostra jsonl, e amostras de rodada única e de múltiplas rodadas podem ser misturadas, conforme mostrado abaixo:
{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动,在这个时期,许多艺术家都绘制了人体。"}]}
{"messages": [{"role": "system", "content": "You are a helpful assistant"}, {"role": "user", "content": "谁在文艺复兴时期绘制人体?"}, {"role": "assistant", "content": "文艺复兴时期是一个关于艺术、文化和学术的复兴运动,在这个时期,许多艺术家都绘制了人体。"},{"role": "user", "content": "那雕塑方面如何呢?"}, {"role": "assistant", "content": "文艺复兴时期的雕塑也非常有名,几位世界级的雕塑大师都出自于这个时期"}]}
Descrição dos campos do formato ChatML:
  • messages: array de mensagens. A mensagem system é opcional e vem em primeiro lugar; as mensagens user e assistant se alternam; conversas de múltiplas rodadas continuam adicionando pares de mensagens user/assistant, e a última mensagem assistant é a resposta de referência da amostra.
  • O content da mensagem assistant pode conter o raciocínio do modelo: o texto de raciocínio é colocado antes da resposta e separado pela marca </think> (usado ao avaliar modelos de raciocínio).
  • extra: campo de extensão personalizado opcional, que suporta objetos, arrays, valores numéricos e outros tipos; é possível anexar dados personalizados às amostras conforme a necessidade do negócio.
Especificações do conjunto de avaliação:
  • Métodos de ingestão: upload local e backflow de log; importação via Object Storage Service (OSS) e montagem de armazenamento em nuvem não são suportados.
  • Apenas versões em rascunho criadas anteriormente suportam edição online (Prompt/Completion); versões publicadas não podem ser editadas.
  • Datasets no formato ChatML exibem, na visualização de arquivos da página de detalhes do dataset, o conteúdo completo do messages amostra por amostra em jsonl.
Limites de ingestão por backflow de log:
  • O intervalo de logs suportado é dos últimos 30 dias.
  • Máximo de 100.000 registros por importação.
  • É necessário autorizar a função vinculada ao serviço (service-linked role) e especificar a API Key e as condições de filtro de modelo.
  • O conjunto de treinamento está disponível apenas para cenários SFT de geração de texto (o conjunto de avaliação de geração de texto também é suportado).
Para detalhes sobre o método de ingestão por backflow de log, consulte Backflow de log. O conjunto de avaliação deve ser uma coleção independente de dados sem sobreposição, usada para avaliar objetivamente a capacidade de generalização do modelo. Para as regras de gerenciamento do conjunto de avaliação, consulte Conjunto de treinamento e conjunto de avaliação.

Geração de texto - Formato DPO

Os dados de treinamento DPO de geração de texto usam o formato jsonl. Com base na estrutura multivolta ChatML messages, contêm adicionalmente duas saídas contrastantes do assistant, chosen e rejected, para o treinamento de alinhamento de preferências. Todo o conteúdo dentro de messages é usado como entrada, e o DPO treina o feedback positivo/negativo do modelo sobre a última entrada do user. Para as regras da estrutura multivolta messages, consulte Geração de texto - Formato SFT. Para conteúdo de raciocínio profundo, a saída chosen ou rejected do assistant pode ser envolvida por tags de raciocínio. A tag de raciocínio pode ser colocada apenas na última linha do assistant. Para as regras, consulte Geração de texto - Formato SFT. O parâmetro loss_weight (disponível apenas por convite) suporta o módulo chosen. O intervalo de valores é de 0.0 a 1.0; quanto maior o valor, maior a importância no treinamento. Para detalhes, consulte Geração de texto - Formato SFT. O limite de tamanho de arquivo único para dados de treinamento DPO é 200 MB, igual ao SFT de geração de texto. Para a definição de DPO, consulte Introdução ao ajuste fino de modelos. Para operações de gestão de versões e publicação, consulte Conjunto de treinamento e conjunto de avaliação. Consulte o bloco de código abaixo para um exemplo de dados de treinamento DPO de geração de texto:
  • Standard ChatML
  • Raciocínio profundo (thinking)
Exemplo de formato padrão de comparação chosen/rejected (duas saídas contrastantes do assistant):
{
  "messages": [
    {"role": "system", "content": "系统输入"},
    {"role": "user", "content": "用户输入1"},
    {"role": "assistant", "content": "模型输出1"},
    {"role": "user", "content": "用户输入2"},
    {"role": "assistant", "content": "模型输出2"},
    {"role": "user", "content": "用户输入3"}
  ],
  "chosen": {"role": "assistant", "content": "赞同的模型期望输出3"},
  "rejected": {"role": "assistant", "content": "反对的模型期望输出3"}
}

Geração de texto - Formato CPT

Os dados de treinamento CPT de geração de texto usam o formato jsonl de texto simples, com um objeto jsonl por linha, estruturado como {text}, onde o campo text é o conteúdo em texto simples. Para as regras da estrutura multivolta messages, consulte Geração de texto - Formato SFT. Restrições dos dados de treinamento CPT:
  • Recomenda-se um mínimo de 50 milhões de Tokens, e o limite de tamanho de arquivo único é 300 MB.
Para a definição de CPT, consulte Introdução ao ajuste fino de modelos; para gestão de versões e operações de publicação, consulte Conjunto de treinamento e conjunto de avaliação. A estrutura JSON completa de um exemplo de texto simples CPT é mostrada no bloco de código abaixo. {text} exemplo de formato de texto simples (um objeto jsonl de texto simples por linha):
{
  "text": "文本内容"
}

Compreensão visual - Formato SFT

Os dados de treinamento SFT de imagem são usados para a compreensão multimodal do Qwen VL (a opção na UI do console é "Image Understanding"). Usam o formato de pacote zip contendo um arquivo de dados de texto de treinamento data.jsonl e arquivos de imagem. O data.jsonl deve ficar na raiz do pacote. O campo messages de cada registro de treinamento no data.jsonl adota uma estrutura de array content, com itens do array contendo um campo de imagem (image) e um campo de texto (text). Recomenda-se uma estrutura de diretório de camada única. Para as regras de empacotamento, consulte Regras de empacotamento do pacote zip multimodal.
  • Limites de entrada de imagem
  • Limites de entrada de vídeo
Os limites de admissão de imagens são:
  • A largura e a altura de uma única imagem não podem exceder 1024 px.
  • Uma única imagem não pode exceder 10 MB.
  • Formatos suportados: bmp, jpeg, jpg, png, tif, tiff, webp.
resized_width e resized_height são parâmetros opcionais de controle de dimensionamento alvo, usados para especificar as dimensões alvo de dimensionamento da imagem; eles não são o limite superior de admissão da imagem. O limite superior de admissão da imagem é largura e altura não excedendo 1024 px e arquivo único não excedendo 10 MB. Os valores específicos de admissão de imagem seguem o exibido no console.Para o cálculo do consumo de tokens de imagens, consulte Compreensão de imagem e vídeo - Faturamento e limites de taxa.
Os exemplos de treinamento SFT de imagem são mostrados nas abas abaixo:
  • Standard ChatML
  • Raciocínio profundo (thinking)
  • Function calling (function calling)
  • Entrada de imagem
  • Modo de caminho de arquivo de vídeo
  • Modo de lista de quadros de imagem
Exemplo de formato ChatML padrão (diálogo multivolta system/user/assistant):
{
  "messages": [
    {"role": "system", "content": [{"text": "系统输入1"}]},
    {"role": "user", "content": [{"text": "用户输入1"}]},
    {"role": "assistant", "content": [{"text": "期望的模型输出1"}]},
    {"role": "user", "content": [{"text": "用户输入2"}]},
    {"role": "assistant", "content": [{"text": "期望的模型输出2"}]}
  ]
}
Para a definição de compreensão multimodal, consulte Introdução ao ajuste fino de modelos.

Regras do formato function calling

O modo function calling adiciona definições de tools e o mecanismo tool_calls/role:tool sobre a estrutura multivolta messages. As restrições de campos são:
  • tools: array de definição de ferramentas; cada item contém type:"function" e function{name, description, parameters}; parameters é um JSON Schema (contendo type/properties/required).
  • messages: array de diálogo multivolta; os papéis incluem user, assistant e tool.
  • content: array de conteúdo multimodal; pode conter itens image, text, video e outros (consistente com o formato de compreensão multimodal).
  • assistant.tool_calls: array de chamadas de ferramenta geradas pelo modelo; contém id, type:"function", function{name, arguments}; arguments é uma string JSON.
  • role:"tool": retorno da ferramenta; o tool_call_id deve corresponder um a um ao tool_calls[].id correspondente; o content contém o resultado retornado pela ferramenta.
A última mensagem de um diálogo multivolta geralmente é a resposta final do assistant com base no retorno da ferramenta. O Bailian não suporta os parâmetros name e weight da OpenAI; todas as saídas do assistant serão treinadas. Dados de treinamento migrados da OpenAI/Azure não devem conter os campos name/weight. Recomendações de diversidade e equilíbrio de dados: a quantidade de dados de cada cenário deve ser relativamente equilibrada, e a proporção de dados deve corresponder à proporção real dos cenários. Evite excesso de um único tipo de dado, o que faria o modelo tender a aprender esse tipo de características e afetar a capacidade de generalização.

Regras da tag de raciocínio

O conteúdo de raciocínio é envolvido pelas tags <think>\n…\n</think>\n\n e colocado dentro do texto de saída do assistant (pertencendo ao mesmo último content do assistant da resposta final). Regras:
  • Deve ser colocado apenas na última saída do assistant; saídas intermediárias do assistant não adicionam tags de raciocínio.
  • As quebras de linha antes e depois das tags de raciocínio devem ser preservadas.
  • Se as amostras de treinamento configurarem o modelo para não gerar tags de raciocínio, após a conclusão do treinamento não é recomendado ativar o modo thinking nas chamadas.

Regras de empacotamento do pacote zip multimodal

Os dados de treinamento de compreensão multimodal são enviados como um pacote zip pela página Add Dataset. O empacotamento deve atender às seguintes restrições:
  • O pacote zip suporta no máximo 2 GB.
  • O conjunto de caracteres permitido para nomes de pastas e arquivos dentro do pacote é letras ASCII (a-z, A-Z), dígitos (0-9), underscores (_) e hífens (-).
  • O arquivo de dados de texto de treinamento é fixo como data.jsonl e deve estar no diretório raiz do pacote zip — garanta que, após a extração, abrir o arquivo zip mostre diretamente o data.jsonl, sem nenhuma pasta externa adicional envolvendo o conteúdo.
Os nomes de arquivos de imagem ou vídeo devem ser globalmente únicos dentro do pacote zip, mesmo se distribuídos em pastas diferentes. Dentro do data.jsonl, basta declarar o nome do arquivo, e não o caminho — exemplo correto: image1.jpg; exemplo errado: jpg_folder/image1.jpg. A montagem de armazenamento em nuvem não suporta pacotes zip. Ao carregar um dataset via montagem de armazenamento em nuvem, você deve enviar a pasta do dataset descompactada por completo para o Bucket OSS e especificar o caminho do arquivo data.jsonl via file_path do MountStorage; quando houver múltiplos arquivos, basta especificar o caminho do data.jsonl, e os demais arquivos no mesmo diretório são montados automaticamente. Para detalhes sobre a montagem de armazenamento em nuvem, consulte Ajuste fino via API ou CLI. Exemplos de nomenclatura e estrutura de diretórios são mostrados no bloco de código abaixo. Para operações de autorização de montagem de armazenamento em nuvem, consulte Ajuste fino de modelos no console; para operações de marcação de importação de Bucket OSS, consulte Conjunto de treinamento e conjunto de avaliação.
# 单层目录(推荐)
Trainingdata_vl.zip
  |--- data.jsonl        # 必须在根目录,外层不再包裹文件夹
  |--- image1.png
  |--- video1.mp4

# data.jsonl 内声明文件名(非路径)
# 正确:image1.jpg
# 错误:jpg_folder/image1.jpg
Acesse a página Create dataset do console para enviar o pacote zip multimodal e concluir a validação do empacotamento.

Limites de tamanho e quantidade de arquivos

Os limites superiores de tamanho e quantidade de arquivos para upload local são definidos por método de treinamento e cenário, conforme detalhado na tabela específica de cenário abaixo. Para os limites de admissão de imagens, consulte Compreensão visual - Formato SFT; para os limites de formato do conjunto de avaliação, consulte Formato do conjunto de avaliação; para os limites de ingestão por backflow de log, consulte Formato do conjunto de avaliação. O max_length assume valores no intervalo de 500 a 131072 como parâmetro de configuração de comprimento de sequência de treinamento, não como limite superior de admissão de upload. O limite superior do tamanho de admissão de um registro individual de dados de treinamento segue o exibido na página do console. Os limites superiores de tamanho e quantidade de arquivos para upload local são definidos por método de treinamento e cenário. O volume de dados recomendado é o valor mínimo sugerido:

Método/cenário de treinamento

Tamanho máx. de arquivo único

Qtd. máx. de arquivos (maxCount)

Volume de dados recomendado

Geração de texto - Formato SFT

200 MB

10 (padrão)

Pelo menos milhares de amostras

Geração de texto - Formato DPO

200 MB

10 (padrão)

Pelo menos centenas de amostras

Geração de texto - Formato CPT

300 MB

1

Pelo menos 50 milhões de Tokens

Multimodal (zip)

2 GB

1

Prepare amostras suficientes conforme os cenários reais

Nome do arquivo (sem extensão)

≤120 caracteres e único

—

—

Extensão

Deve constar na lista de Create dataset

—

—

Cota de upload via API

A cota para envio de arquivos de ajuste fino via DashScope API (com purpose marcado como ajuste fino de modelo) é mostrada na tabela de cotas abaixo. Ao criar um dataset no console, a lista File API suporta mesclar e registrar até 10 arquivos; arquivos de ajuste fino enviados via API ficam visíveis e utilizáveis tanto na página de ajuste fino de modelo do console quanto em chamadas de API. Restrições para carregamento de datasets via montagem de armazenamento em nuvem:
  • Especifique o caminho do manifesto do diretório raiz data.jsonl via file_path do MountStorage; pacotes zip não são suportados.
  • Antes de montar, você deve autorizar o serviço Bailian a acessar os dados do OSS.
Tratamento de estouro e criptografia:
  • Arquivo único acima de 300 MB: envie via montagem de armazenamento em nuvem ou pelo canal ZIP multimodal de 2 GB.
  • Cota total excedida: exclua arquivos históricos para liberar espaço.
  • Dados importados ativam automaticamente a criptografia no lado do servidor do OSS (SSE-OSS, AES256).
Para detalhes sobre chamadas de API, autenticação, SDK, códigos de erro e campos do MountStorage, consulte Ajuste fino via API ou CLI. A cota para envio de arquivos de ajuste fino via API é a seguinte:

Item de cota

Limite

Descrição

Tamanho de arquivo único

Até 300 MB

Arquivos de ajuste fino (para ajuste fino de modelo)

Espaço total de arquivos válidos

100 GB

Acumulado de arquivos não excluídos

Contagem total de arquivos válidos

10000

Acumulado de arquivos não excluídos

Duração de armazenamento de arquivos

Sem limite de tempo

Não expira automaticamente

Limite superior da lista File API

10

Registro mesclado ao criar dataset no console

As diferenças entre importação via OSS e montagem de armazenamento em nuvem são comparadas a seguir:

Dimensão

Importação via OSS

Montagem de armazenamento em nuvem

Pré-requisito

Tag de autorização de acesso a dados do Bailian

Autorizar o serviço Bailian a acessar dados do OSS

Forma dos dados

Arquivos individuais ou em lote

Pasta inteira do dataset descompactado (zip não suportado)

Entrada

Data Management > New Dataset > OSS Import

Model Fine-tuning > Create Training Task > Data Configuration > Dataset Mount

Conjunto de avaliação

✗

✗

Validação de upload e erros comuns

Ao enviar arquivos localmente na página Add Dataset, a validação do frontend rejeita arquivos que não atendem às regras de admissão e exibe um aviso. Os cenários comuns de rejeição por validação e erros de upload são mostrados nos itens expansíveis abaixo:
Diagnóstico:O maxCount é definido por método de treinamento — texto SFT/DPO tem padrão 10, zip multimodal e CPT têm padrão 1. Enviar arquivos que excedem o limite do método de treinamento correspondente resulta em rejeição pelo frontend.Ação:Ajuste conforme a seguir e reenvie:
  1. Verifique o limite superior de maxCount do método de treinamento atual; para detalhes, consulte Limites de tamanho e quantidade de arquivos.
  2. Reduza a contagem de arquivos para dentro do limite; mescle dados multimodais em um único zip e dados CPT em um único jsonl.
  3. Se a contagem ainda exceder o limite, divida em múltiplos datasets e envie em lotes.
Diagnóstico:O nome do arquivo sem a extensão tem limite superior de 120 caracteres e deve conter apenas letras ASCII, dígitos, underscores e hífens.Ação:Ajuste conforme a seguir e reenvie:
  1. Renomeie o arquivo para que o nome (excluindo a extensão) fique dentro de 120 caracteres.
  2. Use apenas caracteres a-z/A-Z/0-9/_/-; remova caracteres chineses e outros não ASCII.
  3. Nomes de arquivos dentro de um pacote multimodal também devem ser globalmente únicos.
Diagnóstico:Nomes de arquivos no mesmo dataset devem ser únicos excluindo a extensão; a comparação ignora a extensão.Ação:Ajuste conforme a seguir e reenvie:
  1. Verifique se há arquivos com nomes duplicados e renomeie-os para que a parte sem extensão seja única.
  2. Arquivos com o mesmo nome mas extensões diferentes (ex.: image.jpg e image.png) também são considerados duplicados e devem ser diferenciados simultaneamente.
  3. Nomes de arquivos dentro de um zip multimodal devem ser globalmente únicos, mesmo se distribuídos em pastas diferentes.
Diagnóstico:O limite superior de tamanho de arquivo único varia por cenário do método de treinamento — texto SFT/DPO 200 MB, zip multimodal 2 GB, CPT 300 MB.Ação:Ajuste conforme a seguir e reenvie:
  1. Verifique se o tamanho do arquivo excede o limite superior do método de treinamento correspondente.
  2. Divida o jsonl em múltiplos arquivos para envio em lotes (SFT/DPO); dividir dados CPT exige criar múltiplos novos datasets.
  3. Para o método de tratamento de estouro quando um arquivo único excede 300 MB, consulte Cota de upload via API.
Diagnóstico:A extensão deve estar dentro da lista suportada — treinamento de texto usa jsonl, conjuntos de avaliação diferem por formato de amostra (prompt&completion usa xls/xlsx, ChatML-messages suporta jsonl/xls/xlsx), imagens multimodais suportam bmp/jpeg/jpg/png/tif/tiff/webp, e vídeos multimodais suportam mp4 e outros formatos.Ação:Ajuste conforme a seguir e reenvie:
  1. Verifique se a extensão do arquivo está dentro da lista suportada do cenário correspondente.
  2. Converta o arquivo para uma extensão suportada e reempacote para envio.
  3. Extensões de imagem e vídeo dentro de um zip multimodal devem estar cada uma em conformidade, caso contrário a importação do pacote inteiro falha.
Diagnóstico:Causas comuns são falta da tag do Bucket, autorização de acesso do serviço Bailian ao OSS anômala ou formato de arquivo não conforme.Ação:Solucione conforme a seguir e tente novamente:
  1. Verifique se o Bucket OSS recebeu a tag de autorização de acesso a dados do Bailian.
  2. Confirme que o serviço Bailian foi autorizado a acessar os dados do OSS.
  3. Verifique se o data.jsonl e o formato do arquivo estão em conformidade com as regras de empacotamento e tente o envio novamente; para detalhes, consulte Regras de empacotamento do pacote zip multimodal.
Aviso de risco de operações irreversíveis:
  • Operações de publicação e exclusão são ambas irreversíveis; versões publicadas não podem ser editadas novamente, e apenas versões em rascunho podem ser excluídas ou editadas online.
  • O tipo de dataset (conjunto de treinamento/conjunto de avaliação) não pode ser alterado nem alternado após a criação; selecionar o errado exige criar um novo dataset e reimportar todos os dados.
  • Alternar o tipo de dataset, o cenário de treinamento ou o método de treinamento limpa os arquivos enviados e redefine o local de armazenamento e o método de importação.
A divisão automática do conjunto de validação extrai aleatoriamente 10% dos dados do conjunto de treinamento como conjunto de validação, reduzindo o volume real de dados de treinamento. Para datasets pequenos, recomenda-se um conjunto de validação independente; para operações de configuração do conjunto de validação, consulte Ajuste fino de modelos no console. Recomenda-se baixar primeiro o modelo de dados do cenário correspondente; preparar os dados conforme a estrutura do modelo evita falhas de importação. Para recomendações de download do modelo de dados, consulte Visão geral. A solução de problemas comuns está detalhada nos itens expansíveis abaixo. Para operações de limpeza e aumento de dados em rascunho, consulte , e para domínios de dados de segurança e conformidade, consulte . Quando a validação de upload falhar, acesse a página New Dataset do console para verificar o formato do arquivo e as regras de admissão.