7

我正在开发一个需要将屏幕捕获到位图以进行传输的应用程序。我正在尝试使用新的 Android 5.0 android.media.projection API来进行屏幕截图。

此 API 的工作流程最终调用

mediaProjection.createVirtualDisplay("Test Screen", WIDTH, HEIGHT, DPI,
   DisplayManager.VIRTUAL_DISPLAY_FLAG_AUTO_MIRROR, surface, null, null);

在我最初尝试捕获此捕获时，我从 SurfaceView 中获取了表面对象。这工作正常；最终结果是在屏幕上绘制的显示的微小副本（导致Droste 效果）

我认为该功能几乎完成了，但后来我发现SurfaceViews（从代码的角度来看）不可读；你不能从他们那里得到位图。

在寻找其他解决方案时，我遇到了这个与我的目标非常相似的问题，并且在该线程中建议使用 ImageReader 而不是 SurfaceView 来获取传递给 createVirtualDisplay API 调用的 Surface。

但是，当我将代码更改为使用 ImageReader 代替 SurfaceView 时，会出现运行时 logcat 错误（无异常），并且永远不会调用 ImageReader 的回调函数。createVirtualDisplay 调用还返回一个看似有效的 VirtualDisplay 对象。

这是日志猫：

9230-9270/com.android.techrocket9.nanoid E/BufferQueueProducer﹕ [unnamed-9230-0] dequeueBuffer: createGraphicBuffer failed
9230-9246/com.android.techrocket9.nanoid E/BufferQueueProducer﹕ [unnamed-9230-0] dequeueBuffer: can't dequeue multiple buffers without setting the buffer count
9230-9246/com.android.techrocket9.nanoid E/BufferQueueProducer﹕ [unnamed-9230-0] dequeueBuffer: can't dequeue multiple buffers without setting the buffer count
9230-9246/com.android.techrocket9.nanoid E/BufferQueueProducer﹕ [unnamed-9230-0] dequeueBuffer: can't dequeue multiple buffers without setting the buffer count
9230-9246/com.android.techrocket9.nanoid E/BufferQueueProducer﹕ [unnamed-9230-0] dequeueBuffer: can't dequeue multiple buffers without setting the buffer count

第二行在停止发生之前重复了约 100 次。

在调试器上单步执行，我看到第一个错误发生在 createVirtualDisplay 调用期间，所有其他错误都发生在执行返回系统代码后的某个时间点。

此错误的唯一有意义的结果与 Kitkat 中的一个问题有关，我尝试使用的 API 不存在。尽管如此，我还是尝试了这里建议的修复（放入android:hardwareAccelerated="false"清单）。这并没有改变应用程序的行为。

如何“设置缓冲区计数”或以其他方式解决此错误并将屏幕作为位图获取？

PS我的开发平台是Nexus 6。

根据要求，完整的代码块：

MediaProjection mediaProjection = mgr.getMediaProjection(resultCode, data);
ImageReader ir = ImageReader.newInstance(WIDTH, HEIGHT, ImageFormat.JPEG, 5);
VirtualDisplay v = mediaProjection.createVirtualDisplay("Test Screen", WIDTH, HEIGHT, getApplicationContext().getResources().getDisplayMetrics().densityDpi, DisplayManager.VIRTUAL_DISPLAY_FLAG_AUTO_MIRROR, ir.getSurface(), null, null);

编辑：关于工件问题，这是我用来从图像中获取位图并显示它的代码：

 public void onImageAvailable(ImageReader reader) {
        Image image = null;
        ByteArrayOutputStream bos = null;

        try {
            image = reader.acquireLatestImage();
            if (null == image){
                return;
            }
            bos = new ByteArrayOutputStream();
            final Image.Plane[] planes = image.getPlanes();
            final ByteBuffer buffer = (ByteBuffer) planes[0].getBuffer().rewind();
            final Bitmap bitmap = Bitmap.createBitmap(image.getWidth(), image.getHeight(), Bitmap.Config.ARGB_8888);
            bitmap.copyPixelsFromBuffer(buffer);
            //bitmap.compress(Bitmap.CompressFormat.WEBP, 50, bos);

            runOnUiThread(new Runnable() {
                public void run() {
                    iv.setImageBitmap(bitmap);
                }
            });
4

2 回答 2

9

我想我现在可以回答这个问题了，我遇到了同样的问题，并且在我改变之后ImageFormat.JPEG一切PixelFormat.RGBA_8888顺利。似乎不支持 ImageFormat.JPEG。

您需要使用以下代码来获取正确的位图：

                    int width = img.getWidth();
                    int height = img.getHeight();
                    int pixelStride = planes[0].getPixelStride();
                    int rowStride = planes[0].getRowStride();
                    int rowPadding = rowStride - pixelStride * width;
                    byte[] newData = new byte[width * height * 4];

                    int offset = 0;
                    bitmap = Bitmap.createBitmap(metrics,width, height, Bitmap.Config.ARGB_8888);
                    ByteBuffer buffer = planes[0].getBuffer();
                    for (int i = 0; i < height; ++i) {
                        for (int j = 0; j < width; ++j) {
                            int pixel = 0;
                            pixel |= (buffer.get(offset) & 0xff) << 16;     // R
                            pixel |= (buffer.get(offset + 1) & 0xff) << 8;  // G
                            pixel |= (buffer.get(offset + 2) & 0xff);       // B
                            pixel |= (buffer.get(offset + 3) & 0xff) << 24; // A
                            bitmap.setPixel(j, i, pixel);
                            offset += pixelStride;
                        }
                        offset += rowPadding;
                    }

这样，位图的内容就是你想要的。

PS：我真的想说，android的文档很糟糕。我们需要调查太多细节才能正确使用 sdk api。

于 2014-12-24T14:12:36.500 回答
1

从 ImageReader 获取图像的更好方法是创建大小合适的位图并使用方法 copyPixelsFromBuffer()。创建 ImageReader 如下： 

mImageReader = ImageReader.newInstance(mWidth, mHeight, ImageFormat.RGB_565, 2);

然后您可以使用下面的代码从 mImageReader 获取图像。

final Image.Plane[] planes = image.getPlanes();
final ByteBuffer buffer = planes[0].getBuffer();
int offset = 0;
int pixelStride = planes[0].getPixelStride();
int rowStride = planes[0].getRowStride();
int rowPadding = rowStride - pixelStride * mWidth;
// create bitmap
bitmap = Bitmap.createBitmap(mWidth+rowPadding/pixelStride, mHeight, Bitmap.Config.RGB_565);
bitmap.copyPixelsFromBuffer(buffer);
image.close();

我在一篇博文中描述了使用 MediaProjection API 捕获屏幕的过程以及大多数人在从 ImageReader 获取图像时所犯的错误，如果有兴趣可以阅读。

于 2015-03-03T22:25:40.723 回答