18 sierpnia 2018 roku odbył się ostatni w karierze mecz Kasparsa. Wystąpił on w spotkaniu 1. ligi łotewskiej (drugi poziom rozgrywkowy) w barwach swojego pierwszego klubu FK Auda przeciwko drużynie BFC Daugavpils/Progress. W tym meczu Kaspars założył opaskę kapitana a jego zespół uległ rywalowi 0-6. Na boisku wystąpiło także dwóch braci Kasparsa – Jorens i Rihards. Gorkšs otrzymał w tym meczu pamiątkową koszulkę Audy ze swoim nazwiskiem, którą wręczył mu jego ojciec Juris, będący prezydentem Audy.
Pod koniec stycznia 2019 roku, do sekretarza generalnego federacji wpłynął list z wnioskiem o dymisję Gorkšsa ze stanowiska prezydenta LFF. Najpoważniejsze zarzuty to: deficyt budżetowy w wysokości 2,5 miliona euro, fatalna organizacja oraz fakt, że narodowa reprezentacja od ok. 2 miesięcy pozostaje bez trenera. W związku z tym kongres nadzwyczajny zwołano 28 lutego 2019 roku w jednej z auli Uniwersytetu Łotwy. W zgromadzeniu wzięło udział 133 ze 141 zarejestrowanych w federacji członków. Z ramienia UEFA w Rydze przemawiał Niemiec Oliver Jung. Ostatecznie w głosowaniu dotyczącym odwołania Gorkšsa padł wynik 87-42 na korzyść prezydenta LFF. Na mocy tej decyzji Gorkšs pozostał na swoim stanowisku.