8

我正在尝试创建应用程序,在其中我可以在录制过程中从设备上的不同摄像机录制视频。例如。用户从前置摄像头按下“开始录制”按钮,5 秒录制后用户按下“切换摄像头”按钮,应用程序将视频源从前置摄像头更改为后置摄像头并继续录制。对于相机切换,我使用下一个代码:

NSError *error;
AVCaptureDeviceInput *newVideoInput;
AVCaptureDevicePosition currentCameraPosition = [[videoInput device] position];

if (currentCameraPosition == AVCaptureDevicePositionBack)
{
    currentCameraPosition = AVCaptureDevicePositionFront;
}
else
{
    currentCameraPosition = AVCaptureDevicePositionBack;
}

AVCaptureDevice *backFacingCamera = nil;
NSArray *devices = [AVCaptureDevice devicesWithMediaType:AVMediaTypeVideo];
for (AVCaptureDevice *device in devices) 
{
    if ([device position] == currentCameraPosition)
    {
        backFacingCamera = device;
    }
}
newVideoInput = [[AVCaptureDeviceInput alloc] initWithDevice:backFacingCamera error:&error];

if (newVideoInput != nil)
{
    [_captureSession beginConfiguration];

    [_captureSession removeInput:videoInput];
    if ([_captureSession canAddInput:newVideoInput])
    {
        [_captureSession addInput:newVideoInput];
        videoInput = newVideoInput;
    }
    else
    {
        [_captureSession addInput:videoInput];
    }
    //captureSession.sessionPreset = oriPreset;
    [_captureSession commitConfiguration];
}

_inputCamera = backFacingCamera;

在此应用程序更改视频源并继续编写之后,但是...音频/视频不同步...有人可以解决这个问题吗?

谢谢你。

4

3 回答 3

3

我遇到了同样的问题,尝试了很多东西,并想出了一个简单方便的解决方案,并且没有任何故障。

在此处输入图像描述

问题是,正如@daij-djan 指出的那样,切换会话输入需要一点时间,并在输出中添加一些黑色帧,然后继续发送帧,就好像它从未停止过一样。据我所知,不可能知道有多少帧受到影响。会话时间码不受此延迟的影响,因此我们不能使用它来忽略某些视频帧。

在此处输入图像描述

您可以每个摄像头输入一个会话(如果需要,一个用于音频)和一个视频输出,而不是一个会话具有多个摄像头输入。然后你只需要在会话之间切换这个输出。

在此处输入图像描述

结果,您将没有去同步化,也没有丑陋的黑客可做。在我的测试中,内存影响非常有限,我没有注意到任何性能影响。我的理论是会话在附加输出之前是不活动的。

开关输出可以这样完成:

fromSession.beginConfiguration()
fromSession.removeOutput(videoOutput)
fromSession.commitConfiguration()

toSession.beginConfiguration()
if toSession.canAddOutput(videoOutput) { toSession.addOutput(videoOutput) }
toSession.commitConfiguration()
于 2019-02-19T16:03:15.013 回答
1

您需要停止录制,切换并重新开始。相机开关不是即时AFAIK

你不能录制成n个文件然后把它们拼接在一起吗?

尝试使用单独的 AVMutableComposition 轨道,然后为音频和视频设置一个可变组合。(请参阅使用 AVMutableComposition 合并两个 m4v 电影文件 - 视频不会合并

于 2012-12-19T11:17:37.627 回答
0

切换相机时,需要在委托方法中暂停缓冲区写入:

- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection

你可以查看开源项目 PBJVision

于 2016-01-05T07:56:21.757 回答