描述

本接口支持声音克隆和音色创造两种能力，基于少量音频样本或文本指令生成目标音色的语音（Text-to-Speech）。

音色克隆：基于用户提供的 WAV 音频样本克隆声音，再将指定文本合成为该音色的语音。
音色创造：无需提供音频，通过 instruct 描述期望的音色特征，直接创造新音色并合成语音。

params.parameter.task_type 支持 vocal_transformer、synth_once 和 voice_design，对应四种输入模式。

版本

1.0

图片要求

本接口输入媒体为音频。音色克隆模式（vocal_transformer 不传 instruct 或 synth_once）必须传入音频样本 URL，建议使用 WAV 格式；音色创造模式（vocal_transformer 传 instruct 或 voice_design）不需要音频样本。本文请求与 SDK 示例采用需要音频样本的 synth_once 模式。

调用 URL

    正式环境：https://openapi.meitu.com
    任务提交接口：https://openapi.meitu.com/api/v1/sdk/sync/push
    任务名称(task)：/v1/ai_audio_qwen_tts/491349
    任务类型(task_type)：formula

调用方法

POST

Content-Type: application/json

权限

开放平台接口签名

请求参数

是否必选	参数名	类型	参数说明
必选	params	string	算法参数（JSON 字符串）
必选	init_images	object[]	多媒体文件列表
必选	task	string	固定 `/v1/ai_audio_qwen_tts/491349`
必选	task_type	string	固定 `formula`
可选	sync_timeout	int	默认 30，同步超时时间

init_images 多媒体文件参数，结构说明如下

是否必选	参数名	类型	参数说明
必选	url	string	音频 URL；音色创造模式下不需要音频样本
必选	profile	object	属性信息描述

profile 属性信息描述

是否必选	参数名	类型	参数说明
必选	media_profiles	object	媒体属性信息
必选	version	string	固定 `v1`

media_profiles 媒体属性信息

是否必选	参数名	类型	参数说明
可选	media_data_type	string	默认 `url`，表示 `url` 字段为媒体 URL

params 推理参数是 JSON 字符串，其结构说明如下

是否必选	字段	类型	说明
可选	rsp_media_type	string	默认 `url`；`jpg` 表示 base64
必选	parameter	object	算法核心参数对象

parameter 算法参数详情

是否必选	字段	类型	说明
可选	app	string	应用标识
必选	task_type	string	算法合成模式：`vocal_transformer`、`synth_once` 或 `voice_design`
必选	text	string	要合成的目标文本内容
条件必选	instruct	string	音色描述指令；音色创造模式必选，音色克隆模式不传
可选	language	string	合成语言，仅 `voice_design` 模式支持，例如 `Chinese`
可选	uid	string	用户标识，用于标记本次合成的用户

模式与输入要求如下：

模式	parameter.task_type	instruct	音频样本
音色克隆	`vocal_transformer`	不传	必须传入
音色克隆	`synth_once`	不传	必须传入
音色创造	`vocal_transformer`	必选	不需要
音色创造	`voice_design`	必选	不需要

输入值示例

以下为音色克隆 synth_once 模式示例：

{
  "task": "/v1/ai_audio_qwen_tts/491349",
  "task_type": "formula",
  "init_images": [
    {
      "url": "https://obs.mtlab.meitu.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA==/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave",
      "profile": {
        "media_profiles": {
          "media_data_type": "url"
        },
        "version": "v1"
      }
    }
  ],
  "params": "{\"rsp_media_type\":\"url\",\"parameter\":{\"app\":\"your-app\",\"task_type\":\"synth_once\",\"text\":\"要合成的完整句子。\",\"uid\":\"user-1\"}}",
  "sync_timeout": 30
}

返回值说明

注意，生成的结果，会定期清理，请及时下载保存

字段	类型	说明
request_id	string	请求标识
trace_id	string	链路追踪标识
code	int	业务状态码，`0` 表示请求受理成功
error_code	int	错误码，成功时为 `0`
message	string	业务信息
tips	any	补充提示
data	object	任务状态和算法结果

data 中单个元素的字段说明

字段	类型	说明
status	int	状态码：-1 未找到任务；0 创建成功；1 执行中；2 失败；9 超时，使用查询接口查询；10 成功
result	object	算法结果
progress	number	任务进度，取值范围 0～1，`1` 表示完成
predict_elapsed	int	预计耗时，毫秒
create_time	int64	创建时间戳，毫秒
task_id	string	任务 ID
custom_task_id	string	客户自定义任务 ID
trace_id	string	链路追踪标识
client_info	string	客户端信息
init_images	object[]/null	输入媒体回显

result 中单个元素的字段说明

字段	类型	说明
id	string	任务唯一标识
parameters	object	算法处理参数回显，包含音频合成结果
data	object	算法返回的详细数据
msg	string	返回信息
msg_id	string	消息 ID
mtlab_res	object	算法底层返回结果

合成音频 URL 通过 parameters.out_src 或 result.data.parameter.out_src 返回；返回值中不含 urls、images 字段。

result.data 字段说明

字段	类型	说明
duration	object	各阶段耗时统计
error_code	number	算法错误码，`0` 表示成功
error_msg	string	算法错误信息
extra	object	扩展字段
media_info_list	array	媒体信息列表，此处为空数组
msg_id	string	消息 ID
parameter	object	参数回显

duration 字段说明

字段	类型	说明
alg_process_time	number	算法处理耗时，毫秒
created_timestamp	number	任务创建时间戳，秒
pull_timestamp	number	拉取资源时间戳，秒
repost_time	number	重试耗时
upload_time	number	上传耗时，毫秒
waiting_time	number	排队等待耗时，毫秒

parameters / parameter 字段说明

字段	类型	说明
code	number	合成结果码，`0` 表示成功
msg	string	合成结果信息
id	string	本次合成的唯一标识
src	string	克隆源音频的完整 URL
clone_ori_path	string	克隆源音频路径
out_src	string	合成音频的输出 URL，可直接访问或下载
text	string	合成的目标文本
duration	number	合成音频的时长，秒
name	string	用户标识，对应请求中的 `uid`
create_time	string	合成任务创建时间，格式 `yyyy-MM-dd HH:mm:ss`
updated_time	string	合成任务更新时间，格式 `yyyy-MM-dd HH:mm:ss`
latency	string	合成耗时，秒，例如 `14.65`
ts_info	object	时间戳信息（预留字段）

mtlab_res 字段说明

字段	类型	说明
ErrorCode	number	底层错误码
ErrorMsg	string	底层错误信息
error_code	number	错误码（兼容字段）
error_msg	string	错误信息（兼容字段）
media_info_list	array/null	媒体信息列表
msg_id	string	消息 ID
parameter	object/null	参数信息

返回值示例

请求成功返回示例

{
  "request_id": "",
  "trace_id": "",
  "code": 0,
  "error_code": 0,
  "message": "success",
  "tips": null,
  "data": {
    "status": 10,
    "result": {
      "id": "t_mt1a3i5n7b04a2e6e0-f8bc-4051-a5aa-af5b4604497c",
      "parameters": {
        "clone_ori_path": "https://obs-open-platform.obs.cn-north-4.myhuaweicloud.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA%3D%3D/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave?AccessKeyId=QLFrateOfrxEG2sqhJ0Y&Expires=1779539428&Signature=TAqSFs0%2BPZP5SW%2B8JZ6YlapXUwc%3D",
        "code": 0,
        "create_time": "2026-05-22 20:30:28",
        "duration": 1.76,
        "id": "5ce81565-bdbc-41df-8782-3e2bca88f661",
        "latency": "14.65",
        "msg": "success",
        "name": "user-1",
        "out_src": "https://mt-aiaudio-release.oss-cn-beijing.aliyuncs.com/temporary/zeroshot/5ce81565-bdbc-41df-8782-3e2bca88f661_0.wav",
        "src": "https://obs-open-platform.obs.cn-north-4.myhuaweicloud.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA%3D%3D/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave?AccessKeyId=QLFrateOfrxEG2sqhJ0Y&Expires=1779539428&Signature=TAqSFs0%2BPZP5SW%2B8JZ6YlapXUwc%3D",
        "text": "要合成的完整句子。",
        "ts_info": {},
        "updated_time": "2026-05-22 20:30:43"
      },
      "data": {
        "duration": {
          "alg_process_time": 14856,
          "created_timestamp": 1779453028,
          "pull_timestamp": 1779453028,
          "repost_time": 0,
          "upload_time": 0,
          "waiting_time": 30
        },
        "error_code": 0,
        "error_msg": "success",
        "extra": {},
        "media_info_list": [],
        "msg_id": "dfa635ba-cad8-41b0-7709-r00924be2f00",
        "parameter": {
          "clone_ori_path": "https://obs-open-platform.obs.cn-north-4.myhuaweicloud.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA%3D%3D/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave?AccessKeyId=QLFrateOfrxEG2sqhJ0Y&Expires=1779539428&Signature=TAqSFs0%2BPZP5SW%2B8JZ6YlapXUwc%3D",
          "code": 0,
          "create_time": "2026-05-22 20:30:28",
          "duration": 1.76,
          "id": "5ce81565-bdbc-41df-8782-3e2bca88f661",
          "latency": "14.65",
          "msg": "success",
          "name": "user-1",
          "out_src": "https://mt-aiaudio-release.oss-cn-beijing.aliyuncs.com/temporary/zeroshot/5ce81565-bdbc-41df-8782-3e2bca88f661_0.wav",
          "src": "https://obs-open-platform.obs.cn-north-4.myhuaweicloud.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA%3D%3D/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave?AccessKeyId=QLFrateOfrxEG2sqhJ0Y&Expires=1779539428&Signature=TAqSFs0%2BPZP5SW%2B8JZ6YlapXUwc%3D",
          "text": "要合成的完整句子。",
          "ts_info": {},
          "updated_time": "2026-05-22 20:30:43"
        }
      },
      "msg": "success",
      "msg_id": "dfa635ba-cad8-41b0-7709-r00924be2f00",
      "mtlab_res": {
        "ErrorCode": 0,
        "ErrorMsg": "",
        "error_code": 0,
        "error_msg": "",
        "media_info_list": null,
        "msg_id": "dfa635ba-cad8-41b0-7709-r00924be2f00",
        "parameter": null
      }
    },
    "progress": 1,
    "predict_elapsed": 10000,
    "create_time": 1779453028327,
    "task_id": "t_mt1a3i5n7b04a2e6e0-f8bc-4051-a5aa-af5b4604497c",
    "custom_task_id": "",
    "trace_id": "",
    "client_info": "",
    "init_images": null
  }
}

需要查询返回示例

使用查询接口接口查询

Response Status：200

content-type 为 application/json; charset=utf-8

{
  "request_id": "",
  "trace_id": "",
  "code": 0,
  "error_code": 0,
  "message": "success",
  "tips": null,
  "data": {
    "status": 9,
    "result": {},
    "progress": 0,
    "predict_elapsed": 10000,
    "create_time": 1779453028327,
    "task_id": "t_mt1a3i5n7b04a2e6e0-f8bc-4051-a5aa-af5b4604497c",
    "custom_task_id": "",
    "trace_id": "",
    "client_info": "",
    "init_images": null
  }
}

请求失败返回示例

Response Status：400

content-type 为 application/json; charset=utf-8

{
  "request_id": "",
  "trace_id": "",
  "code": 20001,
  "error_code": 20001,
  "message": "PROCESS_ERROR",
  "tips": null,
  "data": {
    "status": 2,
    "result": {
      "error_code": 20001,
      "error_msg": "PROCESS_ERROR"
    },
    "progress": 0,
    "predict_elapsed": 0,
    "create_time": 1779453028327,
    "task_id": "t_mt1a3i5n7b04a2e6e0-f8bc-4051-a5aa-af5b4604497c",
    "custom_task_id": "",
    "trace_id": "",
    "client_info": "",
    "init_images": null
  }
}

当前 API 特有错误：20001（PROCESS_ERROR），表示处理错误。

通用的错误代码与信息

详见 API 错误码

SDK 调用示例

以下示例均采用音色克隆 synth_once 模式，并对实际发送的请求体进行签名。

Python

import json

import requests
from sign_sdk import sign

def api_call_example():
    key = "your_api_key"
    secret = "your_api_secret"
    url = "https://openapi.meitu.com/api/v1/sdk/sync/push"
    method = "POST"

    headers = {
        "Content-Type": "application/json",
        sign.HeaderHost: "openapi.meitu.com",
    }
    inner_params = {
        "rsp_media_type": "url",
        "parameter": {
            "app": "your-app",
            "task_type": "synth_once",
            "text": "要合成的完整句子。",
            "uid": "user-1",
        },
    }
    payload = {
        "task": "/v1/ai_audio_qwen_tts/491349",
        "task_type": "formula",
        "init_images": [
            {
                "url": "https://obs.mtlab.meitu.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA==/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave",
                "profile": {
                    "media_profiles": {"media_data_type": "url"},
                    "version": "v1",
                },
            }
        ],
        "params": json.dumps(inner_params, ensure_ascii=False),
        "sync_timeout": 30,
    }
    body = json.dumps(payload, ensure_ascii=False)

    signer = sign.Signer(key, secret)
    signed_request = signer.sign(url, method, headers, body)
    response = requests.Session().send(signed_request)
    print(f"Status: {response.status_code}")
    print(f"Response: {response.text}")

if __name__ == "__main__":
    api_call_example()

Go

package main

import (
	"fmt"
	"io"
	"net/http"

	"github.com/mtlab/api/signer"
)

func main() {
	key := "your_api_key"
	secret := "your_api_secret"
	signObj := signer.NewSigner(key, secret)

	url := "https://openapi.meitu.com/api/v1/sdk/sync/push"
	method := http.MethodPost
	headers := make(http.Header)
	headers.Set(signer.HeaderHost, "openapi.meitu.com")
	headers.Set("Content-Type", "application/json")

	body := `{
  "task": "/v1/ai_audio_qwen_tts/491349",
  "task_type": "formula",
  "init_images": [{
    "url": "https://obs.mtlab.meitu.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA==/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave",
    "profile": {
      "media_profiles": {"media_data_type": "url"},
      "version": "v1"
    }
  }],
  "params": "{\"rsp_media_type\":\"url\",\"parameter\":{\"app\":\"your-app\",\"task_type\":\"synth_once\",\"text\":\"要合成的完整句子。\",\"uid\":\"user-1\"}}",
  "sync_timeout": 30
}`

	req, err := signObj.Sign(url, method, headers, body)
	if err != nil {
		fmt.Println("Failed to sign request:", err)
		return
	}

	resp, err := http.DefaultClient.Do(req)
	if err != nil {
		fmt.Println("Failed to send request:", err)
		return
	}
	defer resp.Body.Close()

	responseBody, err := io.ReadAll(resp.Body)
	if err != nil {
		fmt.Println("Read response failed:", err)
		return
	}
	fmt.Println("Response:", resp.StatusCode, string(responseBody))
}

PHP

<?php
require 'signer.php';

$key = 'your_api_key';
$secret = 'your_api_secret';
$signer = new Signer($key, $secret);

$url = 'https://openapi.meitu.com/api/v1/sdk/sync/push';
$method = 'POST';
$headers = ['Content-Type' => 'application/json'];

$innerParams = json_encode([
    'rsp_media_type' => 'url',
    'parameter' => [
        'app' => 'your-app',
        'task_type' => 'synth_once',
        'text' => '要合成的完整句子。',
        'uid' => 'user-1',
    ],
]);

$body = json_encode([
    'task' => '/v1/ai_audio_qwen_tts/491349',
    'task_type' => 'formula',
    'init_images' => [
        [
            'url' => 'https://obs.mtlab.meitu.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA==/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave',
            'profile' => [
                'media_profiles' => ['media_data_type' => 'url'],
                'version' => 'v1',
            ],
        ],
    ],
    'params' => $innerParams,
    'sync_timeout' => 30,
]);

$curl = $signer->sign($url, $method, $headers, $body);
$response = curl_exec($curl);
$status = curl_getinfo($curl, CURLINFO_HTTP_CODE);

if ($status === 0) {
    echo 'Error: ' . curl_error($curl);
} else {
    echo "Status: {$status}\n";
    echo "Response: {$response}\n";
}
curl_close($curl);
?>

Java

package com.meitu.openai.common;

import java.io.BufferedReader;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.net.HttpURLConnection;
import java.net.URL;
import java.nio.charset.StandardCharsets;
import java.util.HashMap;
import java.util.Map;

public class Main {
    public static void main(String[] args) throws Exception {
        Signer signer = new Signer("your_api_key", "your_api_secret");
        String url = "https://openapi.meitu.com/api/v1/sdk/sync/push";
        String method = "POST";

        Map<String, String> headers = new HashMap<>();
        headers.put("Content-Type", "application/json");
        headers.put(Signer.HeaderHost, "openapi.meitu.com");

        String body = "{\n" +
                "  \"task\": \"/v1/ai_audio_qwen_tts/491349\",\n" +
                "  \"task_type\": \"formula\",\n" +
                "  \"init_images\": [{\n" +
                "    \"url\": \"https://obs.mtlab.meitu.com/public/EtRGxLI8ulQ43pGhuZfym9aYUD2PUbMP/MTc3NzAxMDQwMA==/bcbc891b-e6ad-417a-408d-98b3b84d3bd2.wave\",\n" +
                "    \"profile\": {\n" +
                "      \"media_profiles\": {\"media_data_type\": \"url\"},\n" +
                "      \"version\": \"v1\"\n" +
                "    }\n" +
                "  }],\n" +
                "  \"params\": \"{\\\"rsp_media_type\\\":\\\"url\\\",\\\"parameter\\\":{\\\"app\\\":\\\"your-app\\\",\\\"task_type\\\":\\\"synth_once\\\",\\\"text\\\":\\\"要合成的完整句子。\\\",\\\"uid\\\":\\\"user-1\\\"}}\",\n" +
                "  \"sync_timeout\": 30\n" +
                "}";

        Map<String, String> signedHeaders = signer.sign(url, method, headers, body);
        HttpURLConnection connection = (HttpURLConnection) new URL(url).openConnection();
        connection.setRequestMethod(method);
        for (Map.Entry<String, String> entry : signedHeaders.entrySet()) {
            connection.setRequestProperty(entry.getKey(), entry.getValue());
        }
        connection.setDoOutput(true);
        connection.getOutputStream().write(body.getBytes(StandardCharsets.UTF_8));

        int status = connection.getResponseCode();
        InputStream stream = status >= 400
                ? connection.getErrorStream()
                : connection.getInputStream();
        try (BufferedReader reader = new BufferedReader(new InputStreamReader(stream))) {
            StringBuilder response = new StringBuilder();
            String line;
            while ((line = reader.readLine()) != null) {
                response.append(line);
            }
            System.out.println("Response: " + status + " " + response);
        }
    }
}

美得得-声音克隆QWEN

描述

版本