Cómo leer archivos HGT en C ++

Estoy tratando de leer los datos de elevación almacenados en archivos HGT. Por lo que sé, se pueden leer como archivos binarios.

Encontré este hilo:
¿Cómo accedo a los archivos .HGT SRTM en C ++?

Basado en esa publicación, mi código de ejemplo es:

#include <iostream>
#include <fstream>

int main(int argc, const char * argv[])
{

std::ifstream::pos_type size;
char * memblock;

std::ifstream file ("N45W066.hgt", std::ios::in|std::ios::binary|std::ios::ate);

if (file.is_open())
{
    size = 2;
    memblock = new char [size];

    file.seekg(0, std::ios::beg);
    file.read(memblock, size);

    int srtm_ver = 1201;
    int height[1201][1021];

    for (int i = 0; i<srtm_ver; ++i){
        for (int j = 0; j < srtm_ver; ++j) {

            height[i][j] = (memblock[0] << 8 | memblock[1]);
            std::cout<<height[i][j]<<" ";
        }
        std::cout<<std::endl;
    }
}


return 0;
}

Después de la primera ejecución, me da un montón de ceros, y nada más: | El archivo hgt es bueno, lo he probado con una aplicación que puede leer varios tipos de archivos de mapas y contiene los datos de elevación que necesito.