Fine-tuning model pembuatan video

​

Ruang lingkup penerapan

• Wilayah yang didukung: Fitur yang dijelaskan dalam dokumen ini hanya tersedia di wilayah Singapura. Anda harus menggunakan API key yang dibuat di wilayah ini.
• Metode fine-tuning yang didukung: Fine-tuning SFT-LoRA efisien.
• Model yang didukung untuk fine-tuning:
  • Image-to-video (berbasis frame pertama): wan2.7-i2v, wan2.6-i2v, wan2.5-i2v-preview, wan2.2-i2v-flash.
  • Image-to-video (berbasis frame pertama dan terakhir): wan2.2-kf2v-flash.

​

Cara melakukan fine-tuning model

• Image-to-video (berbasis frame pertama)
• Image-to-video (berbasis frame pertama dan terakhir)

Tujuan fine-tuning: Melatih model LoRA untuk efek hujan uang.Hasil yang diharapkan: Masukkan gambar frame pertama—tanpa perlu prompt—dan model akan menghasilkan video dengan efek hujan uang.

Gambar input frame pertama

Video output (sebelum fine-tuning) Anda tidak dapat menghasilkan efek hujan uang yang konsisten setiap kali menggunakan prompt. Gerakan tidak dapat dikontrol.

Video output (setelah fine-tuning) Model yang telah difine-tune mereproduksi efek hujan uang spesifik dari dataset pelatihan tanpa memerlukan prompt.

Tujuan fine-tuning: Melatih model LoRA untuk efek majalah mode.Hasil yang diharapkan: Masukkan gambar frame pertama dan frame terakhir—tanpa perlu prompt—dan model akan menghasilkan video dengan efek majalah mode.

Gambar input frame pertama

Gambar input frame terakhir

Video output (sebelum fine-tuning) Anda tidak dapat menghasilkan efek majalah mode yang konsisten setiap kali menggunakan prompt. Gerakan tidak dapat dikontrol.

Video output (setelah fine-tuning) Model yang telah difine-tune mereproduksi efek majalah mode spesifik dari training dataset tanpa memerlukan prompt.

​

Langkah 1: Unggah dataset Anda

• Image-to-video (berbasis frame pertama): wan-i2v-training-dataset.zip.
• Image-to-video (berbasis frame pertama dan terakhir): wan-kf2v-training-dataset.zip.

Contoh ini menggunakan model image-to-video berbasis frame pertama. Cukup unggah training set; sistem akan secara otomatis membagi sebagian datanya sebagai validation set. Proses pengunggahan dataset memerlukan beberapa menit, tergantung pada ukuran file.

curl --location --request POST 'https://dashscope-intl.aliyuncs.com/compatible-mode/v1/files' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--form 'file=@"./wan-i2v-training-dataset.zip"' \
--form 'purpose="fine-tune"'

{
    "id": "file-ft-b2416bacc4d742xxxx",
    "object": "file",
    "bytes": 73310369,
    "filename": "wan-i2v-training-dataset.zip",
    "purpose": "fine-tune",
    "status": "processed",
    "created_at": 1766127125
}

​

Langkah 2: Fine-tune model

Langkah 2.1 Buat pekerjaan fine-tuning

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/fine-tunes' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json' \
--data '{
    "model": "wan2.7-i2v",
    "training_file_ids": [
        "<your-training-dataset-file-id>"
    ],
    "training_type": "efficient_sft",
    "hyper_parameters": {
        "n_epochs": 50,
        "batch_size": 1,
        "learning_rate": 2e-5,
        "split": 0.9,
        "max_split_val_dataset_sample": 5,
        "eval_epochs": 20,
        "max_pixels": 102400,
        "save_total_limit": 10,
        "lora_rank": 32,
        "lora_alpha": 32
    }
}'

• job_id: ID pekerjaan. Gunakan untuk memeriksa progres.
• finetuned_output: Nama model fine-tuned baru. Gunakan nama ini untuk deployment.
• status: Status pelatihan. Setelah membuat pekerjaan, status awalnya adalah PENDING. Pelatihan belum dimulai.

{
    ...
    "output": {
        "job_id": "ft-202511111122-xxxx",
        "status": "PENDING",
        "finetuned_output": "xxxx-ft-202511111122-xxxx",
        ...
    }
}

Langkah 2.2 Periksa status pekerjaan fine-tuning

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/fine-tunes/<your-job-id>' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json'

• status: Ketika nilai ini menjadi SUCCEEDED, pelatihan selesai. Anda dapat menerapkan model.
• usage: Total token yang digunakan untuk pelatihan. Digunakan untuk penagihan.

{
    ...
    "output": {
        "job_id": "ft-202511111122-xxxx",
        "status": "SUCCEEDED",
        "usage": 432000,
        ...
    }
}

​

Langkah 3: Terapkan model yang telah difine-tune

Langkah 3.1 Terapkan model sebagai layanan online

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/deployments' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json' \
--data '{
    "model_name": "<your-model-name>",
    "aigc_config": {
        "use_input_prompt": false,
        "prompt": "Provide a video description based on the image content. The description must include the phrase “Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding them. The bills continue to fall, while the camera slowly zooms in, they stretch their arms upward, neck slightly tilted back, expression surprised, completely immersed in this wild money rain.”\nOutput Template:\nThe video begins with a shot of [subject description]. [Environment description]. Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding them. The bills continue to fall, while the camera slowly zooms in, they stretch their arms upward, neck slightly tilted back, expression surprised, completely immersed in this wild money rain.\nExample:\nThe video begins showing a young woman standing in front of a brick wall covered with ivy. She has long, smooth reddish-brown hair, wearing a white sleeveless dress, a shiny silver necklace, and a smile on her face. The brick wall in the background is covered with green vines, appearing rustic and natural. Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding her. The bills continue to fall, while the camera slowly zooms in, she stretches her arms upward, neck slightly tilted back, expression surprised, completely immersed in this wild money rain.",
        "lora_prompt_default": "Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding the main character. The bills continue to fall, while the camera slowly zooms in, the main character stretches their arms upward, neck slightly tilted back, with a surprised expression, completely immersed in this wild money rain."
    },
    "capacity": 1,
    "plan": "lora"
}'

• deployed_model: Nama model yang diterapkan. Gunakan untuk memeriksa status deployment dan memanggil model.
• status: Status deployment. Setelah menerapkan model fine-tuned, status awalnya adalah PENDING, yang menandakan bahwa deployment belum dimulai.

{
    ...
    "output": {
        "deployed_model": "xxxx-ft-202511111122-xxxx",
        "status": "PENDING",
        ...
    }
}

Langkah 3.2 Periksa status deployment

• status: Ketika status berubah menjadi RUNNING, model berhasil diterapkan dan siap digunakan.
• deployed_model: Nama model yang diterapkan.

{
    ...
    "output": {
        "status": "RUNNING",
        "deployed_model": "xxxx-ft-202511111122-xxxx",
        ...
    }
}

​

Langkah 4: Panggil model untuk menghasilkan video

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json' \
--header 'X-DashScope-Async: enable' \
--data '{
    "model": "<replace with deployed_model name>",
    "input": {
        "media": [
            {
                "type": "first_frame",
                "url": "https://help-static-aliyun-doc.aliyuncs.com/file-manage-files/en-US/20251219/xmvyqn/lora.webp"
            }
        ]
    },
    "parameters": {
        "resolution": "720P",
        "prompt_extend": false
    }
}'

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/services/aigc/video-generation/video-synthesis' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json' \
--header 'X-DashScope-Async: enable' \
--data '{
    "model": "<replace with deployed_model name>",
    "input": {
        "img_url": "https://help-static-aliyun-doc.aliyuncs.com/file-manage-files/en-US/20251219/xmvyqn/lora.webp"
    },
    "parameters": {
        "resolution": "720P",
        "prompt_extend": false
    }
}'

{
    "output": {
        "task_status": "PENDING",
        "task_id": "0385dc79-5ff8-4d82-bcb6-xxxxxx"
    },
    "request_id": "4909100c-7b5a-9f92-bfe5-xxxxxx"
}

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/services/aigc/image2video/video-synthesis' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json' \
--header 'X-DashScope-Async: enable' \
--data '{
    "model": "<replace with deployed_model name>",
    "input": {
        "first_frame_url": "https://help-static-aliyun-doc.aliyuncs.com/file-manage-files/zh-CN/20260113/typemn/kf2v-first.webp",
        "last_frame_url": "https://help-static-aliyun-doc.aliyuncs.com/file-manage-files/zh-CN/20260113/ekzmff/kf2v_last.webp"
    },
    "parameters": {
        "resolution": "720P",
        "prompt_extend": false
    }
}'

{
    "output": {
        "task_status": "PENDING",
        "task_id": "0385dc79-5ff8-4d82-bcb6-xxxxxx"
    },
    "request_id": "4909100c-7b5a-9f92-bfe5-xxxxxx"
}

curl -X GET https://dashscope-intl.aliyuncs.com/api/v1/tasks/86ecf553-d340-4e21-xxxxxxxxx \
--header "Authorization: Bearer $DASHSCOPE_API_KEY"

{
    "request_id": "c87415d2-f436-41c3-9fe8-xxxxxx",
    "output": {
        "task_id": "a017e64c-012b-431a-84fd-xxxxxx",
        "task_status": "SUCCEEDED",
        "submit_time": "2025-11-12 11:03:33.672",
        "scheduled_time": "2025-11-12 11:03:33.699",
        "end_time": "2025-11-12 11:04:07.088",
        "orig_prompt": "",
        "video_url": "https://dashscope-result-sh.oss-cn-shanghai.aliyuncs.com/xxx.mp4?Expires=xxxx"
    },
    "usage": {
        "duration": 5,
        "video_count": 1,
        "SR": 480
    }
}

​

Buat dataset kustom

​

Format dataset

​

Training set: Wajib

wan-i2v-training-dataset.zip
├── data.jsonl        # Harus bernama data.jsonl. Ukuran maks: 20 MB.
├── image_1.jpeg      # Resolusi maks: 4096×4096. Format: BMP, JPEG, PNG, WEBP.
├── video_1.mp4       # Resolusi maks: 4096×4096. Format: MP4, MOV.
├── image_2.jpeg
└── video_2.mp4

{
    "prompt": "The video begins showing a young woman standing in front of a brick wall covered with ivy. She has long, smooth reddish-brown hair, wearing a white sleeveless dress, a shiny silver necklace, and a smile on her face. The brick wall in the background is covered with green vines, appearing rustic and natural. Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding her. The bills continue to fall, she stretches her arms upward, neck slightly tilted back, expression surprised, completely immersed in this wild money rain.",
    "first_frame_path": "image_1.jpg",
    "video_path": "video_1.mp4"
}

wan-kf2v-training-dataset.zip
├── data.jsonl                # Harus bernama data.jsonl. Ukuran maks: 20 MB.
├── image/                    # Gambar frame pertama dan terakhir.
│   ├── image_1_first.jpg     # Resolusi maks: 4096×4096. Format: BMP, JPEG, PNG, WEBP.
│   └── image_1_last.png
└── video/                    # Video pelatihan.
    ├── video_1.mp4           # Resolusi maks: 4096×4096. Format: MP4, MOV.
    └── video_2.mov

{
    "prompt": "The video begins by showing a young woman in an outdoor setting. She has short, curly dark brown hair, a smile on her face, and looks very friendly. She is wearing a black polo shirt with colorful floral embroidery, with a background of green vegetation and distant mountains. Then she begins the s86b5p transformation.",
    "first_frame_path": "image/image_1_first.jpg",
    "last_frame_path": "image/image_1_last.jpg",
    "video_path": "video/video_1.mp4"
}

​

Validation set: Opsional

wan-i2v-valid-dataset.zip
├── data.jsonl       # Harus bernama data.jsonl. Ukuran maks: 20 MB.
├── image_1.jpeg     # Resolusi maks: 4096×4096. Format: BMP, JPEG, PNG, WEBP.
└── image_2.jpeg

{
    "prompt": "The video begins showing a scene of a young man standing in front of a cityscape. He is wearing a black and white checkered jacket over a black hoodie, with a smile on his face and a confident expression. The background is a city skyline at sunset, with a famous domed building and layered roofs visible in the distance, the sky filled with clouds showing warm orange-yellow hues. Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding him. The bills continue to fall while the camera slowly zooms in, he stretches his arms upward, neck slightly tilted back, expression surprised, completely immersed in this wild money rain.",
    "first_frame_path": "image_1.jpg"
}

wan-kf2v-valid-dataset.zip
├── data.jsonl                 # Harus bernama data.jsonl. Ukuran maks: 20 MB.
└── image/                     # Gambar frame pertama dan terakhir.
    ├── image_1_first.jpg      # Resolusi maks: 4096×4096. Format: BMP, JPEG, PNG, WEBP.
    └── image_1_last.jpg

{
    "prompt": "The video begins showing a scene of a young man standing in front of a cityscape. He is wearing a black and white checkered jacket over a black hoodie, with a smile on his face and a confident expression. The background is a city skyline at sunset, with a famous domed building and layered roofs visible in the distance, the sky filled with clouds showing warm orange-yellow hues. Then the s86b5p money rain effect begins, countless huge-sized US dollar bills (beige background/dark green patterns) pour down like a torrential rain, densely hitting and surrounding him. The bills continue to fall while the camera slowly zooms in, he stretches his arms upward, neck slightly tilted back, expression surprised, completely immersed in this wild money rain.",
    "first_frame_path": "image/image_1_first.jpg",
    "last_frame_path": "image/image_1_last.jpg",
}

​

Skala data dan batasan

• Volume data: Berikan minimal 10 sampel. Semakin banyak data pelatihan, hasilnya semakin baik. Kami merekomendasikan 20–100 sampel untuk kinerja yang stabil.
• Arsip ZIP: Saat mengunggah melalui API, ukuran total ≤ 1 GB.
• Persyaratan gambar pelatihan:
  • Format: BMP, JPEG, PNG, WEBP.
  • Resolusi ≤ 4096×4096.
  • Tidak ada batasan keras pada ukuran file individual (sistem melakukan pra-pemrosesan secara otomatis).
• Persyaratan video pelatihan:
  • Format: MP4, MOV.
  • Resolusi ≤ 4096×4096.
  • Tidak ada batasan keras pada ukuran file individual (sistem melakukan pra-pemrosesan secara otomatis).
  • Durasi per video: model wan2.2 direkomendasikan 2–5 detik; model wan2.5 direkomendasikan 2–10 detik; model wan2.6 dan wan2.7 direkomendasikan 2–10 detik.

​

Pengumpulan dan pembersihan data

1. Tentukan skenario fine-tuning

• Efek video tetap: Ajarkan model perubahan visual spesifik, seperti carousel atau pergantian kostum ajaib.
• Aksi karakter tetap: Tingkatkan kemampuan model untuk mereproduksi gerakan tubuh spesifik, seperti gerakan tari atau teknik bela diri.
• Gerakan kamera tetap: Replikasi sinematografi kompleks, seperti dorong, tarik, geser, miring, atau bidikan orbit.

2. Kumpulkan aset mentah

• Generasi dan penyaringan AI: Gunakan model dasar Wanxiang untuk menghasilkan video secara batch. Pilih secara manual sampel berkualitas tinggi yang paling sesuai dengan efek target Anda. Ini adalah metode paling umum.
• Pembuatan film dunia nyata: Jika Anda memerlukan realisme tinggi untuk adegan interaktif (misalnya, berpelukan, berjabat tangan), gunakan rekaman nyata.
• Rendering perangkat lunak 3D: Untuk efek atau animasi abstrak yang memerlukan kontrol presisi, gunakan perangkat lunak 3D (misalnya, Blender, Cinema 4D).

3. Bersihkan data

​

Anotasi video: Tulis prompt untuk video

​

Rumus penulisan prompt

​

Cara menulis prompt yang baik

Ikuti aturan konsistensi untuk deskripsi efek

• Tujuan: Saat model melihat s86b5p diikuti deskripsi tetap yang sama dan selalu melihat hujan uang, model belajar bahwa s86b5p = efek visual hujan uang.
• Contoh: Baik subjeknya “wanita muda” atau “pria berjas”, prompt berakhir dengan cara yang sama untuk efek hujan uang: “...then the s86b5p money rain effect begins, countless US dollar bills pour down like a torrential rain...”

  Jenis sampel	Konten prompt (Perhatikan konsistensi pada bagian yang digarisbawahi)
  Training sample 1	Video dimulai dengan seorang wanita muda yang berdiri di depan dinding bata... (deskripsi lingkungan dihilangkan)... Kemudian, efek hujan uang s86b5p dimulai: lembaran dolar AS raksasa yang tak terhitung jumlahnya (latar belakang krem/pola hijau tua) mengguyur turun seperti hujan deras, mengenai dan mengelilinginya secara rapat. Lembaran-lembaran uang terus berjatuhan; ia merentangkan tangan ke atas, lehernya sedikit mendongak ke belakang, dengan ekspresi terkejut, sepenuhnya larut dalam hujan uang yang liar ini.
  Training sample 2	Video dimulai dengan seorang pria berjas di sebuah restoran mewah... (deskripsi lingkungan dihilangkan)... Lalu efek hujan uang s86b5p dimulai: uang kertas dolar AS berukuran sangat besar yang tak terhitung jumlahnya (latar belakang krem/pola hijau tua) mengguyur turun seperti hujan deras, menghantam dan mengelilinginya dengan rapat. Uang kertas terus berjatuhan; ia merentangkan tangan ke atas, lehernya sedikit mendongak, dengan ekspresi terkejut, sepenuhnya larut dalam hujan uang yang liar ini.
  Validation sample 1	Video dimulai dengan seorang anak kecil berdiri di depan pemandangan kota... (deskripsi lingkungan tidak disertakan)... Kemudian, efek hujan uang s86b5p dimulai: lembaran-lembaran dolar AS berukuran raksasa yang tak terhitung jumlahnya (latar belakang krem/pola hijau tua) mengguyur turun seperti hujan deras, menerpa dan mengelilinginya dengan rapat. Sementara lembaran-lembaran uang terus berjatuhan, Kamera perlahan melakukan zoom in. Anak tersebut merentangkan tangannya ke atas, lehernya sedikit mendongak, dengan ekspresi terkejut, sepenuhnya larut dalam hujan uang yang liar ini.

Gunakan AI untuk menghasilkan prompt

1. Gunakan AI untuk menghasilkan deskripsi awal
   1. Brainstorming bebas (cari inspirasi): Jika Anda tidak yakin cara mendeskripsikan efek, biarkan AI menjelajah secara bebas.
      • Kirim “Describe the video content in detail” dan amati output model.
      • Fokus pada istilah yang digunakan model untuk lintasan gerakan (misalnya, “pour down like a torrential rain”, “camera slowly zooms in”). Istilah ini dapat digunakan untuk optimasi selanjutnya.
   2. Prompt format tetap (standarkan output): Setelah Anda memiliki gambaran kasar, rancang format tetap untuk memandu AI menghasilkan prompt yang sesuai dengan templat Anda.
      Kode contoh

      Lihat pemahaman visual untuk detail pemanggilan API.

      Copy

      import os
      from openai import OpenAI
      
      client = OpenAI(
          # Kunci API berbeda antara wilayah Beijing dan Singapura. Dapatkan kunci API Anda: https://www.alibabacloud.com/help/zh/model-studio/get-api-key
          # Jika Anda belum mengatur variabel lingkungan, ganti baris berikut dengan: api_key="sk-xxx".
          api_key=os.getenv("DASHSCOPE_API_KEY"),
          # Base URL untuk wilayah Singapura. Untuk wilayah Beijing, ganti dengan: https://dashscope.aliyuncs.com/compatible-mode/v1
          base_url="https://dashscope-intl.aliyuncs.com/compatible-mode/v1",
      )
      completion = client.chat.completions.create(
          model="qwen3-vl-plus",
          messages=[
              {"role": "user","content": [{
                  # Saat mengirimkan file video langsung, atur type ke video_url.
                  # Dengan OpenAI SDK, frame diambil setiap 0,5 detik secara default dan tidak dapat diubah. Untuk laju frame kustom, gunakan SDK DashScope.
                  "type": "video_url",
                  "video_url": {"url": "https://cloud.video.taobao.com/vod/Tm1s_RpnvdXfarR12RekQtR66lbYXj1uziPzMmJoPmI.mp4"}},
                  {"type": "text", "text": "Analyze the video carefully and generate a detailed video description using the following fixed format:"
                                          "Format template: The video begins with [subject description]. The background is [background description]. Then the s86b5p melting effect begins, [detailed motion description]."
                                          "Requirements:"
                                          "1.[Subject description]: Describe people or objects in the frame in detail, including appearance, clothing, and expressions."
                                          "2.[Background description]: Describe the environment, lighting, and weather in detail."
                                          "3.[Motion description]: Describe dynamic changes during the effect (e.g., how objects move, how lighting changes, how the camera moves)."
                                          "4.Integrate all content naturally into the format. Do not keep “[ ]” symbols or add unrelated text."}]
               }]
      )
      print(completion.choices[0].message.content)
      

2. Ekstrak templat efek
   1. Jalankan proses ini beberapa kali pada sampel dengan efek yang sama. Identifikasi frasa berfrekuensi tinggi dan akurat yang digunakan untuk mendeskripsikan efek. Ekstrak “deskripsi efek” generik.
   2. Salin dan tempel deskripsi efek standar ini ke semua sampel untuk efek tersebut.
   3. Pertahankan deskripsi “subjek” dan “latar belakang” unik untuk setiap sampel. Ganti hanya bagian “deskripsi efek” dengan templat terpadu.
3. Tinjauan manual AI dapat mengalami halusinasi atau kesalahan deteksi. Sebagai langkah terakhir, lakukan pemeriksaan manual—misalnya, pastikan deskripsi entitas dan latar belakang sesuai dengan adegan aktual.

​

Evaluasi model menggunakan validation set

​

Tentukan validation set

Metode 1: Tidak mengunggah validation set (sistem memisahkan secara otomatis)

• split: Proporsi data pelatihan yang dipisahkan. Misalnya, 0,9 berarti 90% untuk pelatihan dan 10% untuk validasi.
• max_split_val_dataset_sample: Jumlah maksimum sampel untuk validation set hasil pemisahan otomatis.

• Contoh: Misalkan Anda hanya mengunggah training set dengan 100 sampel, split=0,9 (10% untuk validasi), dan max_split_val_dataset_sample=5.
  • Pemisahan teoretis: 100 × 10% = 10 sampel.
  • Pemisahan aktual: min(10, 5) = 5. Jadi, sistem menggunakan hanya 5 sampel untuk validation set.

Metode 2: Unggah validation set secara manual (menggunakan validation_file_ids)

{
    "model":"wan2.5-i2v-preview",
    "training_file_ids":[ "<training set file ID>" ],
    "validation_file_ids": [ "<custom validation set file ID>" ],
    ...
}

​

Pilih checkpoint terbaik untuk deployment

• Evaluasi: Nilai dengan menonton video pratinjau secara langsung.
• Kriteria pemilihan: Pilih checkpoint dengan kualitas visual terbaik dan tanpa distorsi gerakan.

​

Prosedur

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/fine-tunes/<replace_with_fine-tuning_job_id>/validation-results' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY" \
--header 'Content-Type: application/json'

{
    "request_id": "da1310f5-5a21-4e29-99d4-xxxxxx",
    "output": [
        {
            "checkpoint": "checkpoint-160"
        },
        ...
    ]
}

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/fine-tunes/<replace_with_fine-tuning_job_id>/validation-details/<replace_with_selected_checkpoint>?page_no=1&page_size=10' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY"

{
    "request_id": "375b3ad0-d3fa-451f-b629-xxxxxxx",
    "output": {
        "page_no": 1,
        "page_size": 10,
        "total": 1,
        "list": [
            {
                "video_path": "https://finetune-result.oss-cn-wulanchabu.aliyuncs.com/xxx.mp4?Expires=xxxx",
                "prompt": "The video begins with a young man sitting in a cafe...",
                "first_frame_path": "https://finetune-result.oss-cn-wulanchabu.aliyuncs.com/xxx.jpeg"
            }
        ]
    }
}

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/fine-tunes/<replace_with_fine-tuning_job_id>/export/<replace_with_checkpoint_to_export>?model_name=<replace_with_exported_model_name_for_console_display>' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY"

{
    "request_id": "0817d1ed-b6b6-4383-9650-xxxxx",
    "output": true
}

curl --location 'https://dashscope-intl.aliyuncs.com/api/v1/fine-tunes/<replace_with_fine-tuning_job_id>/checkpoints' \
--header "Authorization: Bearer $DASHSCOPE_API_KEY"

{
    "request_id": "b0e33c6e-404b-4524-87ac-xxxxxx",
    "output": [
         ...,
        {
            "create_time": "2025-11-11T13:27:29",
            "full_name": "ft-202511111122-496e-checkpoint-160",
            "job_id": "ft-202511111122-496e",
            "checkpoint": "checkpoint-160",
            "model_name": "xxxx-ft-202511111122-xxxx-c160", // Field penting. Gunakan untuk deployment dan pemanggilan model.
            "model_display_name": "xxxx-ft-202511111122-xxxx",
            "status": "SUCCEEDED" // Checkpoint berhasil diekspor.
        },
        ...

    ]
}

​

Go live

• Konsistensi data: Konsistensi sangat penting. Periksa “sampel buruk” yang memiliki arah berlawanan atau gaya yang sangat berbeda.
• Jumlah sampel: Tingkatkan jumlah data berkualitas tinggi menjadi 20+ sampel.
• Prompt: Pastikan kata pemicu merupakan istilah yang tidak bermakna dan jarang digunakan (misalnya, s86b5p). Hindari kata umum (misalnya, running) yang dapat menyebabkan interferensi.

• n_epochs (epoch pelatihan)
  • Nilai default: 50. Gunakan nilai default kecuali diperlukan. Jika menyesuaikan, ikuti aturan: “Total langkah pelatihan ≥ 800”.
  • Rumus total langkah: steps = n_epochs × ceiling (ukuran training set / batch_size).
  • Rumus minimum n_epochs: n_epochs = 800 / ceiling (ukuran dataset / batch_size).
  • Contoh: Asumsikan training set berisi 5 sampel dan menggunakan model Wan2.5 (batch_size=4).
    • Langkah per epoch: 5 / 4 = 1,25, dibulatkan ke atas menjadi 2. Total epoch: n_epochs = 800 / 2 = 400. Ini adalah minimum yang direkomendasikan. Anda dapat menambahkannya sesuai kebutuhan.
• batch_size (ukuran batch)
  • Ukuran batch menentukan jumlah sampel data yang dikirim ke model untuk pelatihan sekaligus.
  • Parameter ini merupakan konfigurasi per instans. Kami menyarankan menggunakan nilai default untuk setiap model dan hanya menyesuaikannya jika diperlukan.
  • wan2.7-i2v: Nilai yang direkomendasikan: 1.
  • wan2.5-i2v-preview: Nilai yang direkomendasikan: 4.
  • wan2.2-i2v-flash: Nilai yang direkomendasikan: 4.
  • wan2.2-kf2v-flash: Nilai yang direkomendasikan: 4.

  Jumlah instans aktual yang berjalan untuk pekerjaan pelatihan ditentukan oleh penjadwalan platform. Global Step yang ditampilkan di log pelatihan mungkin berbeda dari hasil perkiraan, tetapi hal ini tidak mengubah jumlah total data pelatihan atau memengaruhi kinerja akhir model.

• learning_rate (tingkat pembelajaran): Gunakan nilai default (2e-5). Biasanya tidak perlu dimodifikasi.

​

Penagihan

• Pelatihan model: Dikenai biaya.
  • Biaya = Total token pelatihan × Harga satuan. Lihat penagihan pelatihan model.
  • Setelah pelatihan, periksa total token yang dikonsumsi pada field usage dari API tanyakan status pekerjaan fine-tuning.
• Penerapan model: Gratis.
• Pemanggilan model: Dikenai biaya.
  • Ditagih sesuai harga pemanggilan standar model dasar fine-tuned. Lihat harga model.

​

Referensi API

​

FAQ

​

T: Bagaimana volume data training set dan validation set dihitung?

• Saat tidak ada validation set yang disediakan: Training set yang diunggah dianggap sebagai "ukuran total dataset". Sistem secara otomatis memisahkan sebagian data untuk validasi.
  • Ukuran validation set = min(ukuran total dataset × (1 − split), max_split_val_dataset_sample). Untuk contoh, lihat tentukan validation set.
  • Ukuran training set = ukuran total dataset − ukuran validation set.
• Saat validation set diunggah secara manual: Sistem tidak lagi memisahkan validation set dari data pelatihan.
  • Ukuran training set = Volume data training set yang diunggah.
  • Ukuran validation set = Volume data validation set yang diunggah.

​

T: Bagaimana merancang kata pemicu yang baik?

• Gunakan kombinasi huruf yang tidak bermakna, seperti sksstyle atau a8z2_bbb.
• Hindari kata bahasa Inggris umum (misalnya, beautiful, fire, dance) untuk mencegah polusi terhadap pemahaman asli model terhadap kata-kata tersebut.

​

T: Apakah fine-tuning dapat mengubah resolusi atau durasi video?