нарисовать android.media.Image на поверхность

У меня есть это приложение для Android.

Он использует SurfaceView, откуда я получаю Surface через SurfaceHolder.

Он также использует ExoPlayer для потоковой передачи видео. Однако я создал экземпляр ImageReader, получил его Surface и перешел к ExoPlayer.

Теперь я нахожусь в ImageReader.OnImageAvailableListener#onImageAvailable и имею доступ к последнему Image.

Я хочу манипулировать Image и отправлять новые данные в "SurfaceView" Surface.

Как я могу «нарисовать» android.media.Image в android.view.Surface?


person Vito De Tullio    schedule 25.08.2015    source источник
comment
Существует код для преобразования Image, полученного из MediaProjection (Android 5.0+ API скриншотов), в Bitmap с учетом шага. Но у них всего один самолет. Я предполагаю, что есть способ сделать то же самое для YUV Image.   -  person CommonsWare    schedule 05.09.2015
comment
Вы смогли это сделать?   -  person RohitMat    schedule 20.02.2018


Ответы (3)


Вопрос мне не ясен. Способ получить android.media.Image - это API Camera2, и там вы можете предоставить поверхность, и «камера» будет рисовать поверх нее. См. пример Camera2Video.

Другой способ получить объект изображения — из ImageReader (например, при декодировании видео). В этом случае вы хотите нарисовать изображение, но не можете предоставить поверхность ImageReader (есть внутренняя поверхность, которая не отображается). В этом случае вы можете нарисовать изображение на SurfaceView. Предполагая, что это так, вам нужно преобразовать изображение в объекты Bitmap.

У вас есть обсуждение того, как выполнить это здесь

person Arkady    schedule 08.09.2019

Возможный дубликат: как рисовать изображение на SurfaceView Android

Сначала получите холст, используя lockCanvas() (см. здесь), во-вторых, получите свое изображение и сделайте его доступным для рисования, используя:

my_bitmap = Bitmap.createBitmap(
  MediaStore.Images.Media.getBitmap(getContentResolver(), uri),
  0,0,90, 90);
drawable=new BitmapDrawable(my_bitmap); 

После этого вы можете нарисовать рисунок на заблокированном холсте и использовать unlockCanvasAndPost (Canvas canvas), чтобы опубликовать обновленный холст обратно в представление поверхности.

person Bas van Stein    schedule 02.09.2015
comment
извините, но я не понимаю: как я могу использовать Bitmap.createBitmap для преобразования экземпляра android.media.Image? Я не говорю о ресурсе изображения... - person Vito De Tullio; 02.09.2015
comment
Как вы получили образ в СМИ? Он должен иметь uri, указывающий на фактические данные. - person Bas van Stein; 02.09.2015
comment
Взгляните на ответ здесь /questions/26673127/ так вы можете получить растровое изображение из объекта изображения. - person Bas van Stein; 02.09.2015
comment
У меня есть изображение из ImageReader, прикрепленного к MediaCodec. - person Vito De Tullio; 03.09.2015
comment
Да, теперь я понимаю, может ли ответ в моем комментарии выше помочь вам в дальнейшем? - person Bas van Stein; 03.09.2015
comment
проблема в том, что android.media.Image НЕ является простым jpeg/png. Это полноценный ЮВ, где используются все плоскости и шаги. - person Vito De Tullio; 03.09.2015
comment
Вы должны четко указать это в своем вопросе, я не знаю, как помочь вам с YUV, извините. - person Bas van Stein; 03.09.2015

вот ответ на ваш вопрос.

MainActivity.java

public class MainActivity extends Activity {
    @Override
    public void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        mySurfaceView mySurfaceView = new mySurfaceView(getApplicationContext());
        setContentView(mySurfaceView);
    }
}

mySurfaceView.java

public class mySurfaceView extends SurfaceView implements
    SurfaceHolder.Callback {

private TutorialThread _thread;

public mySurfaceView(Context context) {
    super(context);
    getHolder().addCallback(this);
    _thread = new TutorialThread(getHolder(), this);
}

@Override
protected void onDraw(Canvas canvas) {
    super.onDraw(canvas);
    Bitmap _scratch = BitmapFactory.decodeResource(getResources(),
            R.drawable.icon);
    canvas.drawColor(Color.BLACK);
    canvas.drawBitmap(_scratch, 10, 10, null);

}

public void surfaceChanged(SurfaceHolder arg0, int arg1, int arg2, int arg3) {
}

public void surfaceCreated(SurfaceHolder arg0) {
    _thread.setRunning(true);
    _thread.start();
}

public void surfaceDestroyed(SurfaceHolder arg0) {
    boolean retry = true;
    _thread.setRunning(false);
    while (retry) {
        try {
            _thread.join();
            retry = false;
        } catch (InterruptedException e) {
        }
    }
}

class TutorialThread extends Thread {
    private SurfaceHolder _surfaceHolder;
    private mySurfaceView _panel;
    private boolean _run = false;

    public TutorialThread(SurfaceHolder surfaceHolder, mySurfaceView panel) {
        _surfaceHolder = surfaceHolder;
        _panel = panel;
    }

    public void setRunning(boolean run) {
        _run = run;
    }

    @Override
    public void run() {
        Canvas c;
        while (_run) {
            c = null;
            try {
                c = _surfaceHolder.lockCanvas(null);
                synchronized (_surfaceHolder) {
                    _panel.onDraw(c);
                }
            } finally {
                if (c != null) {
                    _surfaceHolder.unlockCanvasAndPost(c);
                }
            }
        }
    }
}
}
person Parth Bhayani    schedule 07.09.2015
comment
В этом ответе нет ничего об Image или ImageView. Я не думаю, что вопрос был понят. - person Stephen M -on strike-; 03.10.2018