这个文章是针对Unity 制作的Android程序
java代码部分获取到图片数据,如果要传递到unity,应该怎么做呢?
首先说一下为啥会有这个需求:
如果Unity程序需要外接一些图像设备,例如外接红外摄像头。Unity并不能直接获取到图像数据,首先需要需要在AndroidStudio中做好设备接入工作(驱动程序之类)。然后设备会通过Usb接口返回图像数据,这个数据然后通过java代码传递到unity。
如何传递这个图片数据:
一、图片肯定是字节数组,可以通过java回调,将字节数组传递到Unity。Unity收到数据,然后更新Texture2D的数据。具体交互方式可以看我之前的文章。
二、直接通过字节传递数据的方式,可以实现。但是大数据传递,加上Texture2D的赋值,这样肯定会造成一定延时。
之前一直想通过OpenGl传递,但是属实不会,看了很多资料也没搞通。今天巧合之下弄好了。
首先在Unity中定义一个Texture2D 或者 RenderTexture(主动调用Create,不然不会在硬件创建纹理)。然后可以通过GetNativeTexturePtr获取到Texture的指针。
将指针传递到java中,然后java就可以通过这个指针修改图片数据了
if (!_update) {
return;
}
int[] imageBuffer = new int[0];
if (_conversionScript != null) {
imageBuffer = _conversionScript.getOutputBuffer();
}
if (imageBuffer.length > 1) {
GLES20.glBindTexture(GLES20.GL_TEXTURE_2D, texturePointer);
GLES20.glTexSubImage2D(GLES20.GL_TEXTURE_2D, 0, 0, 0, _previewSize.getWidth(),
_previewSize.getHeight(), GLES20.GL_RGBA, GLES20.GL_UNSIGNED_BYTE,
IntBuffer.wrap(imageBuffer));
}
通过这段代码修改图片数据后,Unity里面的Texture也就更新了。
unity需要设置GraphicsApi为OpenGl,然后取消多线程渲染。
https://github.com/robsondepaula/unity-android-native-camera
这个工程可以做一个参考。
工程中C++部分,我感觉是没有必要的,因此我去掉了,测试暂时没有遇到问题。
Unity 传递图片到java,参考这篇文章https://blog.csdn.net/hongdameng/article/details/84835032
作者:笔端的年华