2

我有一个用java(android)编写的代码,可以打开手机的摄像头并显示帧。下面的代码表示我们可以检索帧的方法。该项目使用 Chaquopy 来解释 python 代码。

 @Override
    public Mat onCameraFrame(CameraBridgeViewBase.CvCameraViewFrame inputFrame) {

        mRgba = inputFrame.rgba();
        Python py = Python.getInstance();

        PyObject pym = (PyObject) 
        py.getModule("MyPythonClass").callAttr("call",mRgba);

        return mRgba;
    }

python代码用于检索帧(由“mRgba”表示,它是java代码中的一个Mat)以进行进一步处理问题是找到一个解决方案将此Mat转换为可以由python代码解释的类型:

def call(frame):

    im = imutils.resize(frame, width=min(300, frame.shape[1]))

“frame”应该是由java代码检索并发送到函数“call”的Mat

4

1 回答 1

1

我通过将 Mat 转换为 java 端的 byteArray 找到了解决方案

ByteArrayOutputStream byteArrayOutputStream = new ByteArrayOutputStream();
        bmp.compress(Bitmap.CompressFormat.PNG, 100, byteArrayOutputStream);
        byteArray = byteArrayOutputStream .toByteArray();

在 python 端,检索到的 byteArray 被转换为 PIL 图像,然后转换为 numpy 数组:

def call(imp):

    pic = Image.open(io.BytesIO(bytes(imp)))
    open_cv_image = np.array(pic)
    # Convert RGB to BGR
    frame = open_cv_image[:, :, ::-1].copy()
    im = imutils.resize(frame, width=min(300, frame.shape[1]))

希望能有所帮助。

于 2019-08-25T17:08:00.893 回答