OutOfMemory error al unir imágenes grandes

Estoy uniendo dos imágenes usando el código de abajo pero arroja unOutOfMemory error, mis imágenes rondan los 1 MB cada una.

private Bitmap overlayMark(String first, String second)
{
    Bitmap bmp1, bmp2;
    bmp1 = BitmapFactory.decodeFile(first);
    bmp2 = BitmapFactory.decodeFile(second);
    if (bmp1 == null || bmp2 == null)
        return bmp1;

    int height = bmp1.getHeight();
    if (height < bmp2.getHeight())
        height = bmp2.getHeight();

    Bitmap bmOverlay = Bitmap.createBitmap(bmp1.getWidth() + bmp2.getWidth(), height,
            Bitmap.Config.ARGB_8888);// Out of memory
    Canvas canvas = new Canvas(bmOverlay);
    canvas.drawBitmap(bmp1, 0, 0, null);
    canvas.drawBitmap(bmp2, bmp1.getWidth(), 0, null);
    bmp1.recycle();
    bmp2.recycle();
    return bmOverlay;
}

Actualizar Intenté debajo de dos respuestas, pero todavía no me ayudó a crear un mapa de bits de un tamaño tan grande, el problema es que el mapa de bits resultante es demasiado grande en torno a 2400x3200, por lo que se está quedando sin memoria.

Cómo puedo unir imágenes grandes sin quedarse sin memoria?

Respuestas a la pregunta(7)

Su respuesta a la pregunta