Qwen-Audio-ASR-Streaming Peristiwa server - Alibaba Cloud Model Studio

Layanan pengenalan ucapan real-time Qwen-Audio-ASR-Streaming mendorong server-side events ke klien melalui WebSocket. Topik ini menjelaskan struktur data dan deskripsi bidang dari empat jenis event: task-started, result-generated, task-finished, dan task-failed.

task-started

Tugas telah berhasil dimulai. Klien dapat mulai mengirimkan data audio.

headerobject

Properties

task_idstring

ID tugas yang dihasilkan oleh klien (dalam format UUID).

eventstring

Jenis event. Nilai ini selalu task-started.

attributesobject

Atribut tambahan. Nilai ini biasanya kosong.

payloadobject

Nilai ini selalu {}.

{
    "header": {
        "task_id": "2bf83b9a-baeb-4fda-8d9a-xxxxxxxxxxxx",
        "event": "task-started",
        "attributes": {}
    },
    "payload": {}
}

result-generated

Hasil pengenalan, mencakup hasil antara (sentence_end=false) dan hasil akhir (sentence_end=true). Hasil antara pertama untuk kalimat baru mencakup sentence_begin=true.

headerobject

Properties

task_idstring

ID tugas yang dihasilkan oleh klien (dalam format UUID).

eventstring

Jenis event. Nilai ini selalu result-generated.

payloadobject

Properties

outputobject

Properties

sentenceobject

Properties

begin_timeinteger

Waktu mulai kalimat, dalam milidetik.

end_timeinteger

Waktu akhir kalimat, dalam milidetik.

textstring

Teks yang dikenali.

heartbeatboolean

Jika nilai ini true, hasil tersebut merupakan paket heartbeat dan dapat diabaikan.

sentence_beginboolean

Menunjukkan awal sebuah kalimat.

sentence_endboolean

Apakah kalimat telah berakhir (true = hasil akhir, false = hasil antara).

sentence_idinteger

Identifikasi urutan kalimat. Pada hasil pengenalan normal, sentence_id bertambah dari 1. Ketika heartbeat bernilai true (yaitu, paket heartbeat), sentence_id selalu 0.

wordsarray[object]

Informasi timestamp tingkat kata.

Properties

begin_timeinteger

Waktu mulai kata, dalam milidetik.

end_timeinteger

Waktu akhir kata, dalam milidetik.

textstring

Teks yang dikenali.

punctuationstring

Tanda baca.

usageobject

Penggunaan kumulatif untuk tugas saat ini.

Properti

input_tokensinteger

Jumlah token input kumulatif.

CatatanBerlaku untuk qwen-audio-3.1-asr-flash-streaming.

output_tokensinteger

Jumlah token output kumulatif.

CatatanBerlaku untuk qwen-audio-3.1-asr-flash-streaming.

total_tokensinteger

Jumlah total token kumulatif, yaitu jumlah token input dan output.

CatatanBerlaku untuk qwen-audio-3.1-asr-flash-streaming.

durationinteger

Durasi audio kumulatif, dalam detik.

CatatanDigunakan untuk penagihan qwen-audio-3.0-asr-flash-streaming.

Sentence-start result:

{
  "header": {
    "task_id": "2bf83b9a-baeb-4fda-8d9a-xxxxxxxxxxxx",
    "event": "result-generated",
    "attributes": {}
  },
  "payload": {
    "output": {
      "sentence": {
        "begin_time": 0,
        "end_time": null,
        "text": "",
        "sentence_begin": true,
        "sentence_end": false,
        "sentence_id": 1,
        "words": []
      }
    }
  }
}

Final result:

{
  "header": {
    "task_id": "2bf83b9a-baeb-4fda-8d9a-xxxxxxxxxxxx",
    "event": "result-generated",
    "attributes": {}
  },
  "payload": {
    "output": {
      "sentence": {
        "sentence_id": 1,
        "begin_time": 160,
        "end_time": 1640,
        "text": "欢迎使用阿里云。",
        "channel_id": 0,
        "speaker_id": null,
        "sentence_end": true,
        "words": [
          {
            "begin_time": 160,
            "end_time": 520,
            "text": "欢迎",
            "punctuation": "",
            "fixed": true,
            "speaker_id": null
          },
          {
            "begin_time": 520,
            "end_time": 880,
            "text": "使用",
            "punctuation": "",
            "fixed": true,
            "speaker_id": null
          },
          {
            "begin_time": 880,
            "end_time": 1640,
            "text": "阿里云",
            "punctuation": "。",
            "fixed": true,
            "speaker_id": null
          }
        ],
        "stash": {
          "sentence_id": 2,
          "text": "",
          "begin_time": 1640,
          "current_time": 1640,
          "words": []
        }
      },
      "text": "欢迎使用阿里云。",
      "request_id": "95372ce8e6704bcc8747da94789c15ca",
      "output": {
        "sentence": {
          "sentence_id": 1,
          "begin_time": 160,
          "end_time": 1640,
          "text": "欢迎使用阿里云。",
          "channel_id": 0,
          "speaker_id": null,
          "sentence_end": true,
          "words": [
            {
              "begin_time": 160,
              "end_time": 520,
              "text": "欢迎",
              "punctuation": "",
              "fixed": true,
              "speaker_id": null
            },
            {
              "begin_time": 520,
              "end_time": 880,
              "text": "使用",
              "punctuation": "",
              "fixed": true,
              "speaker_id": null
            },
            {
              "begin_time": 880,
              "end_time": 1640,
              "text": "阿里云",
              "punctuation": "。",
              "fixed": true,
              "speaker_id": null
            }
          ],
          "stash": {
            "sentence_id": 2,
            "text": "",
            "begin_time": 1640,
            "current_time": 1640,
            "words": []
          }
        },
        "text": "欢迎使用阿里云。",
        "request_id": "95372ce8e6704bcc8747da94789c15ca"
      },
      "usage": {
        "duration": 2,
        "input_tokens": 85,
        "output_tokens": 4,
        "total_tokens": 89
      }
    },
    "usage": {
      "duration": 2,
      "input_tokens": 85,
      "output_tokens": 4,
      "total_tokens": 89
    }
  }
}

task-finished

Tugas telah berakhir secara normal. Anda dapat menutup koneksi atau menggunakannya kembali.

headerobject

Properties

task_idstring

ID tugas yang dihasilkan oleh klien (dalam format UUID).

eventstring

Jenis event. Nilai ini selalu task-finished.

attributesobject

Atribut tambahan. Nilai ini biasanya kosong.

payload.usageobject

Penggunaan kumulatif pada akhir tugas. Arti bidang sama dengan result-generated.usage.

{
  "header": {
    "task_id": "2bf83b9a-baeb-4fda-8d9a-xxxxxxxxxxxx",
    "event": "task-finished",
    "attributes": {}
  },
  "payload": {
    "output": {},
    "usage": {
      "duration": 9,
      "input_tokens": 365,
      "output_tokens": 12,
      "total_tokens": 377
    }
  }
}

task-failed

Tugas gagal. Koneksi ditutup dan tidak dapat digunakan kembali.

headerobject

Properties

task_idstring

ID tugas yang dihasilkan oleh klien (dalam format UUID).

eventstring

Jenis event. Nilai ini selalu task-failed.

error_codestring

Deskripsi jenis error.

error_messagestring

Penyebab spesifik dari error tersebut.

attributesobject

Atribut tambahan. Nilai ini biasanya kosong.

payloadobject

Nilai ini selalu {}.

{
    "header": {
        "task_id": "2bf83b9a-baeb-4fda-8d9a-xxxxxxxxxxxx",
        "event": "task-failed",
        "error_code": "CLIENT_ERROR",
        "error_message": "request timeout after 23 seconds.",
        "attributes": {}
    },
    "payload": {}
}