我一直在尝试将 2 个视频与 gstreamer 结合在一起,并在 python 中使用 gstreamer 和 gnonlin 在它们之间进行短暂的过渡(如 smpte)。但是我无法让 gnloperation/smpte 转换工作。
目标
下面是一个程序。我希望它播放一个文件的前 4 秒,并在 2 秒时开始对另一个文件进行 smpte 转换(持续 2 秒)。(所以第二个文件将开始播放 2 秒,但在 2 秒转换过程中被“显示”),转换完成后,应该显示第二个文件本身的 2 秒。
这是基于python 中的另一个 gstreamer/gnonlin 脚本。我已经在 gstreamer-devel 列表(又一次)上问了这个问题,并在这里尝试。
问题
过渡没有完成。过渡运行约 0.5 秒,然后视频 1 播放约 1.5 秒,然后视频 2 切入。我尝试更改控制器的结束位置(例如controller.set("position", 0.5 * gst.SECOND, 0.0)
),过渡在 0.5 秒内完成,但作为转换完成后,视频 1 再次开始播放一段时间,然后视频 2 开始播放。
考虑到视频转换可能被限制为 0.5 秒,我将 gnloperation 更改为 0.5 秒,但是同样的未完成问题仍然存在,除了转换只播放大约 0.3 秒,并且视频 1 的一部分开始播放稍等片刻,然后播放视频 2。
脚本
#! /usr/bin/python
import gst, gobject
gobject.threads_init()
comp = gst.element_factory_make("gnlcomposition", "composition")
gsrc1 = gst.element_factory_make("gnlfilesource")
gsrc1.props.location = "file:///home/rory/helmetcam/dingle-tom/vshort01.mov"
gsrc1.props.start = 0
gsrc1.props.duration = 4 * gst.SECOND
gsrc1.props.media_start = 0
gsrc1.props.media_duration = 4 * gst.SECOND
gsrc1.props.priority = 3
comp.add(gsrc1)
gsrc2 = gst.element_factory_make("gnlfilesource")
gsrc2.props.location = "file:///home/rory/helmetcam/dingle-tom/vshort02.mov"
gsrc2.props.start = 2 * gst.SECOND
gsrc2.props.duration = 6 * gst.SECOND
gsrc2.props.media_start = 0
gsrc2.props.media_duration = 2 * gst.SECOND
gsrc2.props.priority = 2
comp.add(gsrc2)
bin = gst.Bin()
alpha1 = gst.element_factory_make("alpha")
queue = gst.element_factory_make("queue")
smpte = gst.element_factory_make("smptealpha")
smpte.props.type = 21
mixer = gst.element_factory_make("videomixer")
bin.add(alpha1, queue, smpte, mixer)
alpha1.link(mixer)
queue.link(smpte)
smpte.link(mixer)
controller = gst.Controller(smpte, "position")
controller.set_interpolation_mode("position", gst.INTERPOLATE_LINEAR)
controller.set("position", 0, 1.0)
controller.set("position", 2.0 * gst.SECOND, 0.0)
bin.add_pad(gst.GhostPad("sink1", alpha1.get_pad("sink")))
bin.add_pad(gst.GhostPad("sink2", queue.get_pad("sink")))
bin.add_pad(gst.GhostPad("src", mixer.get_pad("src")))
op = gst.element_factory_make("gnloperation")
op.add(bin)
op.props.start = 2 * gst.SECOND
op.props.duration = 2 * gst.SECOND
op.props.media_start = 0
op.props.media_duration = 2 * gst.SECOND
op.props.priority = 1
comp.add(op)
# create the backend
color= gst.element_factory_make("ffmpegcolorspace")
enc = gst.element_factory_make("theoraenc")
mux = gst.element_factory_make("oggmux")
sink = gst.element_factory_make("filesink")
sink.props.location = "./transitions-between-two.ogv"
pipeline = gst.Pipeline()
pipeline.add(comp, color, enc, mux, sink)
color.link(enc)
enc.link(mux)
mux.link(sink)
def on_pad(comp, pad, elements):
convpad = elements.get_compatible_pad(pad, pad.get_caps())
pad.link(convpad)
comp.connect("pad-added", on_pad, color)
# now run the pipeline
loop = gobject.MainLoop(is_running=True)
bus = pipeline.get_bus()
bus.add_signal_watch()
def on_message(bus, message, loop):
if message.type == gst.MESSAGE_EOS:
loop.quit()
elif message.type == gst.MESSAGE_ERROR:
print message
loop.quit()
bus.connect("message", on_message, loop)
pipeline.set_state(gst.STATE_PLAYING)
loop.run()
pipeline.set_state(gst.STATE_NULL)