The Colonial Inn está localizado numa propriedade em forma de L delimitada a oeste pela Shore Road e a norte pela Beachmere Lane. A Igreja Batista Ogunquit fica ao sul do edifício principal do hotel, na curva da L. O edifício principal do hotel é uma estrutura longa, aproximadamente retangular, de quatro andares, em estrutura de madeira, cujo longo lado fica virado para a Beachmere Lane. Um alpendre de um andar estende-se ao longo desta fachada, que tem uma secção saliente de três andares perto do seu centro, e uma secção redonda no canto nordeste. As origens deste edifício encontram-se numa residência do reavivamento grego de c. 1850, que foi repetidamente alargada e ampliada entre os anos 1880 e c. 1920.
Extendendo-se para sul a partir do extremo leste do hotel principal (atrás da igreja, como visto da Shore Road) é um bloco moderno de dois andares de motel, construído em 1983. A leste deste edifício, perto do seu extremo sul, encontra-se uma segunda estrutura de dois andares de motel, orientada este-oeste, que foi construída por volta de 1961. Logo ao norte é um chalé de estilo Shingle de c. 1900, de 1-1/2 andares de altura, que está voltado para o leste, em direção ao oceano. Esta casa era originalmente a residência do proprietário do hotel. A piscina do hotel está localizada a leste do hotel principal e ao norte do bloco de motel de 1983.
O hotel é historicamente significativo porque é o único hotel sobrevivente do século XIX em Ogunquit que ainda serve como hotel e mantém a sua aparência histórica. Outros hotéis do período foram convertidos em condomínios ou (como o vizinho Beachmere) foram engolfados por alterações modernas. A propriedade Colonial Inn encapsula uma história arquitetônica de acomodações turísticas na área.