Maneira mais rápida de pesquisar um número em uma lista de intervalos

Eu tenho o seguinte código para encontrar uma correspondência para um número em uma lista de intervalos.

public class RangeGroup
{
    public uint RangeGroupId { get; set; }
    public uint Low { get; set; }
    public uint High { get; set; }
    // More properties related with the range here
}

public class RangeGroupFinder
{
    private static readonly List<RangeGroup> RangeGroups=new List<RangeGroup>();

    static RangeGroupFinder()
    {
        // Populating the list items here
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023238144, High = 1023246335 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023246336, High = 1023279103 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023279104, High = 1023311871 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023311872, High = 1023328255 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023328256, High = 1023344639 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023344640, High = 1023410175 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023410176, High = 1023672319 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023672320, High = 1023688703 });
        RangeGroups.Add(new RangeGroup { RangeGroupId = 0, Low = 1023692800, High = 1023696895 });
       // There are many more and the groups are not sequential as it can seen on last 2 groups
    }

    public static RangeGroup Find(uint number)
    {
        return RangeGroups.FirstOrDefault(rg => number >= rg.Low && number <= rg.High);
    }
}

A lista do RangeGroup consiste em 5000000 itens e o método Find () será muito usado, então estou procurando uma maneira mais rápida de fazer a pesquisa. Não é problema alterar a estrutura dos dados ou dividi-los de qualquer forma.

Editar:

Todos os intervalos são únicos e adicionados por ordem de Baixo e não se sobrepõem.

Resultado:

Fez um teste usandocódigo do ikh e o resultado é aproximadamente 7000 vezes mais rápido que o meu código. O código de teste e os resultados podem ser vistosAqui.

questionAnswers(5)

yourAnswerToTheQuestion