Używanie SurfaceTexture w połączeniu z RenderScript

Question

Chcę przetwarzać obraz z kamery na GPU na Androidzie.

W mojej obecnej konfiguracji używam SurfaceTexture do przechwytywania klatek ze strumienia obrazu kamery jako tekstury OpenGL ES. Jest to skuteczny sposób na uzyskanie dostępu do strumienia kamery w moich modułach cieniujących. (http://developer.android.com/reference/android/graphics/SurfaceTexture.html)

Teraz chciałbym rozpocząć korzystanie z nowego interfejsu API RenderScript zamiast bezpośredniego użycia OenGL ES. (http://developer.android.com/guide/topics/renderscript/index.html)

Ale aby utworzyć SurfaceTexture, muszę przekazać ID tekstury openGl do konstruktora. Niestety identyfikator tekstury nie jest dostępny (RenderScript używa klasy alokacji do ładowania tekstur, która nie ujawnia identyfikatora tekstury). Więc nie mogę utworzyć SurfaceTexture podczas używania RenderScript.

Przeczytałem całą dokumentację dotyczącą renderscript (która jest wciąż dość rzadka) i obejrzałem próbki, ale nie mają one żadnych informacji na ten temat.

Moje pytanie brzmi: Czy można użyć SurfaceTexture w połączeniu z RenderScript, czy jest jakiś inny skuteczny sposób wykorzystania strumienia kamery na żywo w skrypcie RenderScript Graphics?

Answer 1

Jeśli dobrze rozumiem, już używasz SurfaceTexture. Następnie możesz zarejestrować wywołanie zwrotne pod numerem setOnFrameAvailableListener.

Widzę dwa rozwiązania:

1. Realizuje jesteś właścicielem RSTextureView, która dziedziczy z SurfaceTexture.OnFrameAvailableListener. Zarejestruj swój widok jako wywołanie zwrotne SurfaceTexture. Za każdym razem, gdy twój widok powierzchni jest aktualizowany przez strumień kamery, Twój RSTextureView zostanie powiadomiony i będziesz mógł go obsłużyć tak, jak chcesz.

2. Innym rozwiązaniem byłoby zaimplementować własną RenderScriptGL (nadal dziedziczenie z SurfaceTexture.OnFrameAvailableListener) i wywołać setSurfaceTexture gdy zwrotna jest wywoływana.

Powinieneś być w stanie połączyć RenderScript z SurfaceTexture z co najmniej jednego z tych dwóch rozwiązań.