MediaSync Klasse

Definition

[Android.Runtime.Register("android/media/MediaSync", ApiSince=23, DoNotGenerateAcw=true)]
public sealed class MediaSync : Java.Lang.Object

[<Android.Runtime.Register("android/media/MediaSync", ApiSince=23, DoNotGenerateAcw=true)>]
type MediaSync = class
    inherit Object

Vererbung

Object

Object

MediaSync

Attribute

RegisterAttribute

Hinweise

Die MediaSync-Klasse kann verwendet werden, um Audio- und Videodatenströme synchron wiederzugeben. Sie kann auch zum Wiedergeben von Nur-Audio- oder Videodatenstrom verwendet werden.

MediaSync wird in der Regel wie folgt verwendet:

MediaSync sync = new MediaSync();
            sync.setSurface(surface);
            Surface inputSurface = sync.createInputSurface();
            ...
            // MediaCodec videoDecoder = ...;
            videoDecoder.configure(format, inputSurface, ...);
            ...
            sync.setAudioTrack(audioTrack);
            sync.setCallback(new MediaSync.Callback() {
                {@literal @Override}
                public void onAudioBufferConsumed(MediaSync sync, ByteBuffer audioBuffer, int bufferId) {
                    ...
                }
            }, null);
            // This needs to be done since sync is paused on creation.
            sync.setPlaybackParams(new PlaybackParams().setSpeed(1.f));

            for (;;) {
              ...
              // send video frames to surface for rendering, e.g., call
              // videoDecoder.releaseOutputBuffer(videoOutputBufferIx, videoPresentationTimeNs);
              // More details are available as below.
              ...
              sync.queueAudio(audioByteBuffer, bufferId, audioPresentationTimeUs); // non-blocking.
              // The audioByteBuffer and bufferId will be returned via callback.
              // More details are available as below.
              ...
                ...
            }
            sync.setPlaybackParams(new PlaybackParams().setSpeed(0.f));
            sync.release();
            sync = null;

            // The following code snippet illustrates how video/audio raw frames are created by
            // MediaCodec's, how they are fed to MediaSync and how they are returned by MediaSync.
            // This is the callback from MediaCodec.
            onOutputBufferAvailable(MediaCodec codec, int bufferId, BufferInfo info) {
                // ...
                if (codec == videoDecoder) {
                    // surface timestamp must contain media presentation time in nanoseconds.
                    codec.releaseOutputBuffer(bufferId, 1000 * info.presentationTime);
                } else {
                    ByteBuffer audioByteBuffer = codec.getOutputBuffer(bufferId);
                    sync.queueAudio(audioByteBuffer, bufferId, info.presentationTime);
                }
                // ...
            }

            // This is the callback from MediaSync.
            onAudioBufferConsumed(MediaSync sync, ByteBuffer buffer, int bufferId) {
                // ...
                audioDecoder.releaseBuffer(bufferId, false);
                // ...
            }

Der Client muss die entsprechende Spüle konfigurieren, indem das Surface und/oder AudioTrack basierend auf dem Streamtyp festgelegt wird, der wiedergegeben wird.

Für Video muss der Client aufrufen #createInputSurface , um eine Oberfläche abzurufen, auf der Videoframes gerendert werden.

Für Audio muss der Client die Audiospur ordnungsgemäß einrichten, z. B. mithilfe von AudioTrack#MODE_STREAM. Die Audiopuffer werden direkt über #queueAudioMediaSync an MediaSync gesendet und über Callback#onAudioBufferConsumed asynchron an den Client zurückgegeben. Der Client sollte keinen Audiopuffer ändern, bis er zurückgegeben wird.

Der Client kann optional Audio-/Videopuffer vorab ausfüllen, indem die Wiedergaberate auf 0,0 festgelegt und dann Audio-/Videopuffer an entsprechende Komponenten übertragen werden. Dies kann mögliche anfängliche Unterläufe reduzieren.

Java-Dokumentation für android.media.MediaSync.

Teile dieser Seite sind Änderungen auf der Grundlage von Arbeiten, die vom Android Open Source-Projekt erstellt und freigegeben werden und gemäß den in der Creative Commons 2.5 Attribution License beschriebenen Begriffen verwendet werden.

Konstruktoren

Eigenschaften

Methoden

Explizite Schnittstellenimplementierungen

Erweiterungsmethoden

Gilt für: