Wszystkie stoki góry są strome i mocno rozczłonkowane głębokimi dolinami. W kierunku północno-wschodnim opada spod szczytu krótka, głęboka dolina o nazwie Zbojnicka dolka, w kierunku północno-zachodnim Stratená dolina, a w kierunku południowo-zachodnim - Široká dolka. Spływające nimi drobne cieki wodne uchodzą do potoku Stará voda, spływającego Starovodską doliną. Z kolei w kierunku południowo-wschodnim spod szczytu opada Hutná dolina, s której wody spływają do Bystrego potoku. Zarówno Stará voda jak i Bystrý potok są prawobrzeżnymi dopływami Hnilca.
Geologia
Cały masyw Złotego Stołu budują utwory paleozoiczne, głównie skały pochodzenia metamorficznego, wśród których występują m.in. gruboziarniste tufy z wkładkami ryolitów. Najczęściej spotykane są tu różne odmiany fyllitów (serycytowe, grafitowe i in.), pochodzących z młodszego syluru, często z wkładkami pirytu. Lokalnie występują również warstwy zmetamorfizowanych szarogłazów. Miejscami spotkamy sylurskie czarne łupki z wkładkami lidytów oraz wylewne skały tzw. warstw hnileckich z górnego dewonu. Występowanie w masywie Złotego Stołu tak różnych minerałów sprawiło, że jego stoki, zwłaszcza wschodnie, były w przeszłości terenem intensywnych prac górniczych. Już od XIII w.