Właściciele W 1242 r. po wygnaniu ze Szkocji Johna i Waltera Bysetów z klanu Bisett, którzy zostali oskarżeni o mord na Patryku, Earlu of Atholl, dokonany w Haddington, zamek jeszcze w tym samym roku przeszedł w posiadanie templariuszy. Następnie trafił do rodu Fraser z Cowie, zanim przez małżeństwo przeszedł na własność Sir Williama de Keith, Earla Marszałka Szkocji (Earl Marischal of Scotland) ok. 1355 r. W 1449 r. prawnuczka de Keitha, Joan, wniosła zamek w posagu do małżeństwa z Alexandrem Gordonem, 1 Earlem Huntly. Obecnym właścicielem jest Markiz Huntly (Marquess of Huntly), którego rodzina znajduje się w posiadaniu zamku od XV wieku.
Posiadłość
Po obu stronach rzeki Dee jest duża ilość nasadzeń, w tym nasadzenia ozdobne nad jeziorem Loch of Aboyne.
Górny bieg Dee (Upper Dee) jest obszarem wędkarstwa muchowego. Połów ryb odbywa się za zezwoleniem Glen Tanar Estate (Craigendinnie Beat). Na terenie posiadłości zamku Aboyne znajduje się sztuczne jezioro Loch of Aboyne o rozmiarach 3 x fur. z wysepkami. Potok w Aboyne zachował starą nazwę Allach tylko w pobliżu zamku, gdzie istnieje most zwany Allach Bridge, wybudowany nad potokiem.