Android glTexSubImage2D与GL_TEXTURE_EXTERNAL_OES问题(OpenGL + OpenCV + CameraX)
创始人
2024-08-13 23:00:10
0

在Android中使用OpenGL显示相机预览图像时,可以使用glTexSubImage2D函数将图像数据传递给纹理。然而,当相机使用CameraX库并且配置为使用TextureView作为预览视图时,需要使用GL_TEXTURE_EXTERNAL_OES纹理目标。

以下是一个示例代码,演示了如何在Android中使用OpenGL、OpenCV和CameraX来解决这个问题:

  1. 在项目的build.gradle文件中添加以下依赖项:
implementation 'androidx.camera:camera-core:1.0.0'
implementation 'androidx.camera:camera-camera2:1.0.0'
implementation 'org.opencv:opencv-android:4.5.3'
implementation 'org.opencv:opencv-core:4.5.3'
implementation 'org.opencv:opencv-java:4.5.3'
  1. AndroidManifest.xml文件中添加相机和权限的权限声明:


  1. activity_main.xml中添加一个TextureView作为相机预览视图:

  1. MainActivity.java中实现相机预览和OpenGL渲染的逻辑:
import androidx.appcompat.app.AppCompatActivity;
import androidx.camera.core.CameraSelector;
import androidx.camera.core.ImageAnalysis;
import androidx.camera.core.ImageProxy;
import androidx.camera.lifecycle.ProcessCameraProvider;
import androidx.core.content.ContextCompat;

import android.graphics.SurfaceTexture;
import android.opengl.GLES11Ext;
import android.opengl.GLES20;
import android.opengl.GLSurfaceView;
import android.os.Bundle;
import android.util.Size;
import android.view.TextureView;

import com.google.common.util.concurrent.ListenableFuture;
import org.opencv.android.OpenCVLoader;
import javax.microedition.khronos.egl.EGLConfig;
import javax.microedition.khronos.opengles.GL10;

public class MainActivity extends AppCompatActivity {
    private TextureView textureView;
    private GLSurfaceView glSurfaceView;
    private SurfaceTexture surfaceTexture;
    private int cameraTextureId = -1;

    static {
        if (!OpenCVLoader.initDebug()) {
            // Handle initialization error
        }
    }

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);

        textureView = findViewById(R.id.textureView);
        glSurfaceView = findViewById(R.id.glSurfaceView);
        glSurfaceView.setEGLContextClientVersion(2);
        glSurfaceView.setRenderer(new MyRenderer());
    }

    @Override
    protected void onResume() {
        super.onResume();

        ListenableFuture cameraProviderFuture = ProcessCameraProvider.getInstance(this);
        cameraProviderFuture.addListener(() -> {
            try {
                ProcessCameraProvider cameraProvider = cameraProviderFuture.get();
                bindCameraPreview(cameraProvider);
            } catch (Exception e) {
                // Handle error
            }
        }, ContextCompat.getMainExecutor(this));
    }

    private void bindCameraPreview(ProcessCameraProvider cameraProvider) {
        int width = textureView.getWidth();
        int height = textureView.getHeight();

        surfaceTexture = new SurfaceTexture(createOESTexture());
        surfaceTexture.setDefaultBufferSize(width, height);

        CameraSelector cameraSelector = new CameraSelector.Builder()
                .requireLensFacing(CameraSelector.LENS_FACING_BACK)
                .build();

        ImageAnalysis imageAnalysis = new ImageAnalysis.Builder()
                .setTargetResolution(new Size(width, height))
                .setBackpressureStrategy(ImageAnalysis.STRATEGY_KEEP_ONLY_LATEST)
                .build();

        imageAnalysis.setAnalyzer(ContextCompat.getMainExecutor(this), new ImageAnalysis.Analyzer() {
            @Override
            public void analyze(ImageProxy image) {
                // Process the image using OpenCV
                // ...

                // Update the OpenGL texture with the processed image
                updateTexture(image);

                image.close();
            }
        });

        cameraProvider.unbindAll();
        cameraProvider.bindToLifecycle(this, cameraSelector, imageAnalysis);
    }

    private void updateTexture(ImageProxy image) {
        image.getPlanes()[0].getBuffer().rewind();
        byte[] data = new byte[image.getPlanes()[0].getBuffer().remaining()];
        image.getPlanes()[0].getBuffer().get(data);

        surfaceTexture.attachToGLContext(cameraTextureId);
        surfaceTexture.updateTexImage();
        surfaceTexture.detachFrom

相关内容

热门资讯

安装ug未能链接到许可证服务器 安装UG未能链接到许可证服务器是UG用户在安装软件时常遇到的问题之一。该问题的解决方法需要技术向的知...
按转换模式过滤日志【%t】。 要按照转换模式过滤日志,可以使用正则表达式来实现。下面是一个示例代码,使用Java语言的Patter...
安装Pillow时遇到了问题:... 遇到这个问题,可能是因为缺少libwebpmux3软件包。解决方法是手动安装libwebpmux3软...
安卓 - 谷歌地图卡住了 问题描述:在安卓设备上使用谷歌地图应用时,地图卡住了,无法进行任何操作。解决方法一:清除应用缓存和数...
安装Python库"... 安装Python库"firedrake"的解决方法如下:打开终端或命令提示符(Windows系统)。...
安装React Native时... 当安装React Native时出现构建错误的情况,可以尝试以下解决方法:确保已经安装了最新版本的C...
安装某些NPM包时,'... 在NPM中,'@'符号是用来分隔软件包名称和其特定版本或范围参数的。例如,您可以使用以下命令安装 R...
Android TV 盒子出现... Android TV 盒子上的应用程序停止运行可能是由于多种原因引起的,以下是一些可能的解决方法和相...
按照CSV文件中的名称对图像进... 要按照CSV文件中的名称对图像进行筛选,可以使用以下步骤:读取CSV文件:使用Python的csv模...
ASP计时器阻塞用户界面吗? 在ASP中,计时器不会阻塞用户界面。因为ASP是基于事件驱动的,它使用异步编程模型,不会阻塞用户界面...