A Colonial Inn egy L alakú telken található, amelyet nyugaton a Shore Road, északon pedig a Beachmere Lane határol. Az Ogunquit Baptist Church a szálloda főépületétől délre, az L alakú ívben áll. A szálloda főépülete egy hosszú, nagyjából téglalap alakú, négyszintes favázas épület, amelynek hosszú oldala a Beachmere Lane felé néz. A homlokzat hosszában egyemeletes tornác húzódik, amelynek középső részén egy háromemeletes kiugró rész, az északkeleti sarkon pedig egy lekerekített rész található. Ennek az épületnek az eredete egy 1850 körüli görög stílusú lakóház, amelyet az 1880-as évek és 1920 körüli évek között többször bővítettek és bővítettek.
A főszálló keleti végétől délre (a templom mögött, a Shore Roadról nézve) egy modern, kétszintes motelblokk húzódik, amely 1983-ban épült. Ettől az épülettől keletre, annak déli vége közelében egy második, kelet-nyugati irányú, kétszintes motelépület áll, amely 1961 körül épült. Ettől északra egy 1900 körüli, 1-1/2 emeletes, zsindelyes stílusú házikó áll, amely keletre, az óceán felé néz. Ez a ház eredetileg a szálloda tulajdonosának lakóháza volt. A szálloda úszómedencéje a főszállodától keletre és az 1983-as motelblokktól északra található.
A szálloda történelmileg jelentős, mert ez az egyetlen fennmaradt 19. századi szálloda Ogunquitben, amely még mindig szállodaként működik és megőrizte történelmi megjelenését. Más korabeli szállodákat vagy társasházzá alakítottak át, vagy (mint a szomszédos Beachmere-t) modern átalakítások nyelték el. A Colonial Inn ingatlan a környék turisztikai szálláshelyeinek építészeti történetét foglalja magába.