camera - 如何在颤动中快速访问相机帧

Question

我想在我的颤振应用程序的相机源上实现近乎实时的 OCR。为此，我想快速访问相机数据。据我所知，我有两个选择，并且都遇到了障碍：

CameraPreview通过在其周围放置 aRepaintBoundary并创建RenderRepaintBoundary, 并调用来截取boundary.toImage()。此方法的问题在于 .toImage 方法似乎只捕获边界中绘制的小部件，而不是来自相机预览的数据。与此处描述的问题类似：https ://github.com/flutter/flutter/issues/17687
使用相机 0.2.1 捕获图像controller.takePicture(filePath)，类似于示例文档。这里的问题是图像变得可用需要很长时间（2-3 秒）。我猜这是因为文件在捕获时保存到光盘中，然后需要再次从文件中读取。

有没有什么方法可以直接访问图片信息，做预处理和OCR之类的事情？

score 19 · Accepted Answer

对于“近乎实时的 OCR”，您需要CameraController#startImageStream

示例代码

import 'package:camera/camera.dart';
import 'package:flutter/foundation.dart';
import 'package:flutter/material.dart';

void main() => runApp(MaterialApp(home: _MyHomePage()));

class _MyHomePage extends StatefulWidget {
  @override
  _MyHomePageState createState() => _MyHomePageState();
}

class _MyHomePageState extends State<_MyHomePage> {
  dynamic _scanResults;
  CameraController _camera;

  bool _isDetecting = false;
  CameraLensDirection _direction = CameraLensDirection.back;

  @override
  void initState() {
    super.initState();
    _initializeCamera();
  }

  Future<CameraDescription> _getCamera(CameraLensDirection dir) async {
    return await availableCameras().then(
      (List<CameraDescription> cameras) => cameras.firstWhere(
            (CameraDescription camera) => camera.lensDirection == dir,
          ),
    );
  }

  void _initializeCamera() async {
    _camera = CameraController(
      await _getCamera(_direction),
      defaultTargetPlatform == TargetPlatform.iOS
          ? ResolutionPreset.low
          : ResolutionPreset.medium,
    );
    await _camera.initialize();
    _camera.startImageStream((CameraImage image) {
      if (_isDetecting) return;
      _isDetecting = true;
      try {
        // await doSomethingWith(image)
      } catch (e) {
        // await handleExepction(e)
      } finally {
        _isDetecting = false;
      }
    });
  }
  Widget build(BuildContext context) {
    return null;
  }
}

此功能已合并到https://github.com/flutter/plugins，但没有得到很好的记录。

参考：

camera - 如何在颤动中快速访问相机帧

1 回答 1

Related

Reference