~mmach/netext73/webkit2gtk

« back to all changes in this revision

Viewing changes to Source/WebKit/WebProcess/GPU/webrtc/AudioMediaStreamTrackRenderer.cpp

  • Committer: mmach
  • Date: 2023-06-16 17:21:37 UTC
  • Revision ID: netbit73@gmail.com-20230616172137-2rqx6yr96ga9g3kp
1

Show diffs side-by-side

added added

removed removed

Lines of Context:
 
1
/*
 
2
 * Copyright (C) 2020 Apple Inc. All rights reserved.
 
3
 *
 
4
 * Redistribution and use in source and binary forms, with or without
 
5
 * modification, are permitted provided that the following conditions
 
6
 * are met:
 
7
 * 1. Redistributions of source code must retain the above copyright
 
8
 *    notice, this list of conditions and the following disclaimer.
 
9
 * 2. Redistributions in binary form must reproduce the above copyright
 
10
 *    notice, this list of conditions and the following disclaimer in the
 
11
 *    documentation and/or other materials provided with the distribution.
 
12
 *
 
13
 * THIS SOFTWARE IS PROVIDED BY APPLE INC. AND ITS CONTRIBUTORS ``AS IS''
 
14
 * AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO,
 
15
 * THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
 
16
 * PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL APPLE INC. OR ITS CONTRIBUTORS
 
17
 * BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR
 
18
 * CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF
 
19
 * SUBSTITUTE GOODS OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS
 
20
 * INTERRUPTION) HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN
 
21
 * CONTRACT, STRICT LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE)
 
22
 * ARISING IN ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF
 
23
 * THE POSSIBILITY OF SUCH DAMAGE.
 
24
 */
 
25
 
 
26
#include "config.h"
 
27
#include "AudioMediaStreamTrackRenderer.h"
 
28
 
 
29
#if PLATFORM(COCOA) && ENABLE(GPU_PROCESS) && ENABLE(VIDEO_TRACK) && ENABLE(MEDIA_STREAM)
 
30
 
 
31
#include "GPUProcessConnection.h"
 
32
#include "RemoteAudioMediaStreamTrackRendererManagerMessages.h"
 
33
#include "RemoteAudioMediaStreamTrackRendererMessages.h"
 
34
#include "WebProcess.h"
 
35
#include <WebCore/AudioMediaStreamTrackRenderer.h>
 
36
#include <WebCore/CARingBuffer.h>
 
37
#include <WebCore/WebAudioBufferList.h>
 
38
 
 
39
namespace WebKit {
 
40
 
 
41
std::unique_ptr<WebCore::AudioMediaStreamTrackRenderer> AudioMediaStreamTrackRenderer::create()
 
42
{
 
43
    return std::unique_ptr<AudioMediaStreamTrackRenderer>(new AudioMediaStreamTrackRenderer { WebProcess::singleton().ensureGPUProcessConnection().connection() });
 
44
}
 
45
 
 
46
AudioMediaStreamTrackRenderer::AudioMediaStreamTrackRenderer(Ref<IPC::Connection>&& connection)
 
47
    : m_connection(WTFMove(connection))
 
48
    , m_identifier(AudioMediaStreamTrackRendererIdentifier::generate())
 
49
    , m_ringBuffer(makeUnique<WebCore::CARingBuffer>(makeUniqueRef<SharedRingBufferStorage>(this)))
 
50
{
 
51
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRendererManager::CreateRenderer { m_identifier }, 0);
 
52
}
 
53
 
 
54
AudioMediaStreamTrackRenderer::~AudioMediaStreamTrackRenderer()
 
55
{
 
56
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRendererManager::ReleaseRenderer { m_identifier }, 0);
 
57
}
 
58
 
 
59
void AudioMediaStreamTrackRenderer::start()
 
60
{
 
61
    m_isPlaying = true;
 
62
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::Start { }, m_identifier);
 
63
}
 
64
 
 
65
void AudioMediaStreamTrackRenderer::stop()
 
66
{
 
67
    m_isPlaying = false;
 
68
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::Stop { }, m_identifier);
 
69
}
 
70
 
 
71
void AudioMediaStreamTrackRenderer::clear()
 
72
{
 
73
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::Clear { }, m_identifier);
 
74
}
 
75
 
 
76
void AudioMediaStreamTrackRenderer::setMuted(bool value)
 
77
{
 
78
    WebCore::AudioMediaStreamTrackRenderer::setMuted(value);
 
79
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::SetMuted { value }, m_identifier);
 
80
}
 
81
 
 
82
void AudioMediaStreamTrackRenderer::setVolume(float value)
 
83
{
 
84
    WebCore::AudioMediaStreamTrackRenderer::setVolume(value);
 
85
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::SetVolume { value }, m_identifier);
 
86
}
 
87
 
 
88
void AudioMediaStreamTrackRenderer::pushSamples(const MediaTime& time, const WebCore::PlatformAudioData& audioData, const WebCore::AudioStreamDescription& description, size_t numberOfFrames)
 
89
{
 
90
    if (!m_isPlaying)
 
91
        return;
 
92
 
 
93
    if (m_description != description) {
 
94
        ASSERT(description.platformDescription().type == WebCore::PlatformDescription::CAAudioStreamBasicType);
 
95
        m_description = *WTF::get<const AudioStreamBasicDescription*>(description.platformDescription().description);
 
96
 
 
97
        // Allocate a ring buffer large enough to contain 2 seconds of audio.
 
98
        m_numberOfFrames = m_description.sampleRate() * 2;
 
99
        m_ringBuffer->allocate(m_description.streamDescription(), m_numberOfFrames);
 
100
    }
 
101
 
 
102
    ASSERT(is<WebCore::WebAudioBufferList>(audioData));
 
103
    m_ringBuffer->store(downcast<WebCore::WebAudioBufferList>(audioData).list(), numberOfFrames, time.timeValue());
 
104
    uint64_t startFrame;
 
105
    uint64_t endFrame;
 
106
    m_ringBuffer->getCurrentFrameBounds(startFrame, endFrame);
 
107
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::AudioSamplesAvailable { time, numberOfFrames, startFrame, endFrame }, m_identifier);
 
108
}
 
109
 
 
110
void AudioMediaStreamTrackRenderer::storageChanged(SharedMemory* storage)
 
111
{
 
112
    SharedMemory::Handle handle;
 
113
    if (storage)
 
114
        storage->createHandle(handle, SharedMemory::Protection::ReadOnly);
 
115
    m_connection->send(Messages::RemoteAudioMediaStreamTrackRenderer::AudioSamplesStorageChanged { handle, m_description, static_cast<uint64_t>(m_numberOfFrames) }, m_identifier);
 
116
}
 
117
 
 
118
}
 
119
 
 
120
#endif // PLATFORM(COCOA) && ENABLE(GPU_PROCESS) && ENABLE(VIDEO_TRACK) && ENABLE(MEDIA_STREAM)