:音声とビデオの SEI を設定する方法

次のサンプルコードは、ストリーマーと同時ストリーマーが Alibaba Cloud Push SDK を呼び出して SEI を送受信する例を示しています。

• Android のサンプルコード:

  // SEI の送信: AlivcLivePusher#sendMessage。ストリーム取り込みクライアントがカスタムメッセージを送信します。
  public void sendSEI(String text) {
      mAlivcLivePusher.sendMessage(text, 0, 0, false);
  }
  
  // SEI の受信: AlivcLivePlayInfoListener#onReceiveSEIMessage。メディア拡張情報のコールバックが受信されます。
  @Override
  public void onReceiveSEIMessage(int payload, byte[] data) {
      //Log.d(TAG, "onReceiveSEIMessage: " + payload + ", " + new String(data, StandardCharsets.UTF_8));
  }

• iOS のサンプルコード:

  // AlivcLivePusher の sendMessage メソッドを呼び出して SEI を送信します。
  [self.rtcPusher sendMessage:data repeatCount:1 delayTime:0 KeyFrameOnly:false];
  
  // ストリーマーと同時ストリーマーは、AliLivePlayerDelegate の onReceiveSeiMessage コールバックから SEI を受信します。
  - (void)onReceiveSeiMessage:(AlivcLivePlayer *)player payloadType:(int)payloadType data:(NSData *)data
  {
      if (data.bytes){
          NSString *str = [NSString stringWithUTF8String:data.bytes];
      } 
  }
  

次のサンプルコードは、視聴者が ApsaraVideo Player を使用して SEI フレームを開いて解析する例を示しています。

• Android のサンプルコード:

  mAliPlayer = AliPlayerFactory.createAliPlayer(mContext);
  
  PlayerConfig playerConfig = mAliPlayer.getConfig();
  // FLV 形式の音声のみまたはビデオのみのストリームの SEI フレーム解析を設定して、起動時間を短縮します。
  // 再生開始バッファー。値が大きいほど、再生開始が安定します。ただし、値が大きすぎると、ストリームの再生開始にかかる時間が影響を受ける可能性があります。このパラメーターは適切に指定してください。
  playerConfig.mStartBufferDuration = 1000;
  // 途切れからの回復に必要なキャッシュ。ネットワーク状態が悪い場合は、大きい値を指定します。音声のみのストリームの場合は 500、ビデオストリームの場合は 3000 に設定することをお勧めします。
  playerConfig.mHighBufferDuration = 500;
  // SEI リスニングを有効にします。
  playerConfig.mEnableSEI = true;
  mAliPlayer.setConfig(playerConfig);
  
  mAliPlayer.setAutoPlay(true);
  
  mAliPlayer.setOnErrorListener(errorInfo -> {
      mAliPlayer.prepare();
  });
  
  mAliPlayer.setOnSeiDataListener(new IPlayer.OnSeiDataListener() {
      @Override
      public void onSeiData(int i, byte[] bytes) {
  
      }
  });

• iOS のサンプルコード:

  self.cdnPlayer = [[AliPlayer alloc] init];
  self.cdnPlayer.delegate = self;
  AVPConfig *config = [self.cdnPlayer getConfig];
  config.enableSEI = YES;
  [self.cdnPlayer setConfig:config];
  
  // SEI 関連のコールバックをリッスンします。
  - (void)onSEIData:(AliPlayer*)player type:(int)type data:(NSData *)data {
      if (data.bytes){
          NSString *str = [NSString stringWithUTF8String:data.bytes];
          // SEI メッセージを処理します。
      }
  }

システム SEI: ARTC サーバーによって自動的に生成されます。レイアウト、ストリーマーのマイクの状態、音量、カメラの状態、ネットワークの状態を記述するために使用されます。

カスタム SEI: サーバー側で API 操作を呼び出して、カスタムビジネス情報を送信します。