The Colonial Inn znajduje się na nieruchomości w kształcie litery L graniczy na zachodzie przez Shore Road i na północy przez Beachmere Lane. Kościół Baptystów Ogunquit stoi na południe od głównego budynku hotelowego, w krzywej L. Główny budynek hotelowy jest długim, z grubsza prostokątnym, czteropiętrowym budynkiem z drewnianą ramą, którego długa strona wychodzi na Beachmere Lane. Jednopiętrowy ganek rozciąga się wzdłuż tej fasady, która ma wystającą, trzypiętrową część w pobliżu centrum i zaokrągloną część w północno-wschodnim narożniku. Początki tego budynku leżą w greckiej rezydencji z 1850 roku, która była wielokrotnie rozbudowywana i powiększana od lat 80-tych XIX wieku do 1920 roku.
Wyciągając się na południe od wschodniego końca głównego hotelu (za kościołem, patrząc od Shore Road) znajduje się nowoczesny dwupiętrowy blok motelowy, zbudowany w 1983 roku. Na wschód od tego budynku, w pobliżu jego południowego końca, stoi druga dwupiętrowa struktura motelowa, zorientowana na wschód-zachód, która została zbudowana około 1961 roku. Na północ od niego znajduje się domek w stylu gontowym z ok. 1900 r., o wysokości 1,5 kondygnacji, zwrócony na wschód w kierunku oceanu. Ten dom był pierwotnie rezydencją właściciela hotelu. Basen hotelowy znajduje się na wschód od głównego hotelu i na północ od bloku motelowego z 1983 r.
Hotel jest historycznie istotny, ponieważ jest jedynym zachowanym XIX-wiecznym hotelem w Ogunquit, który nadal służy jako hotel i zachowuje swój historyczny wygląd. Inne hotele z tego okresu zostały albo przekształcone w kondominia, albo (jak sąsiedni Beachmere) zostały pochłonięte przez nowoczesne zmiany. Posiadłość Colonial Inn wpisuje się w architektoniczną historię zakwaterowania turystów w tym rejonie.