Hotelul Colonial Inn este situat pe o proprietate în formă de L, mărginită la vest de Shore Road și la nord de Beachmere Lane. Biserica baptistă Ogunquit se află la sud de clădirea principală a hotelului, în cotul L-ului. Clădirea principală a hotelului este o structură lungă, aproximativ dreptunghiulară, cu patru etaje, cu structură din lemn, a cărei parte lungă este orientată spre Beachmere Lane. Un portic cu un singur etaj se întinde de-a lungul acestei fațade, care are o secțiune proeminentă cu trei etaje aproape de centru și o secțiune rotunjită la colțul de nord-est. Originile acestei clădiri se află într-o reședință renascentistă grecească din c. 1850, care a fost extinsă și mărită în mod repetat între anii 1880 și c. 1920.
Întinzându-se spre sud de la capătul estic al hotelului principal (în spatele bisericii, așa cum se vede de pe Shore Road) se află un bloc modern de motel cu două etaje, construit în 1983. La est de această clădire, aproape de capătul său sudic, se află o a doua structură de motel cu două etaje, orientată est-vest, care a fost construită în jurul anului 1961. La nord de aceasta se află o căsuță în stil Shingle din jurul anului 1900, cu o înălțime de 1-1/2 etaje, care este orientată spre est, spre ocean. Această casă a fost inițial reședința proprietarului hotelului. Piscina hotelului este situată chiar la est de hotelul principal și la nord de blocul motelului din 1983.
Hotelul este semnificativ din punct de vedere istoric, deoarece este singurul hotel din secolul al XIX-lea care a supraviețuit în Ogunquit, care încă servește ca hotel și își păstrează aspectul istoric. Alte hoteluri din acea perioadă fie au fost transformate în condominii, fie (ca și Beachmere din vecinătate) au fost înghițite de modificări moderne. Proprietatea Colonial Inn încapsulează o istorie arhitecturală a cazărilor turistice din zonă.
.