Po zakończeniu sezonu 2001/2002 Schmitt przechodził kryzys formy. W sezonach 2002/2003, 2003/2004, 2004/2005 oraz 2005/2006 ani razu nie stanął na podium zawodów Pucharu Świata. Jego najlepszym wynikiem było czwarte miejsce wywalczone 29 grudnia 2002 w Oberstdorfie. W tym czasie wystartował jednak na wszystkich dużych imprezach. Na mistrzostwach świata w Val di Fiemme w 2003 wystartował tylko na dużej skoczni, indywidualnie zajął 21. miejsce, a wraz z kolegami z reprezentacji zajął czwarte miejsce w konkursie drużynowym. Czwarte miejsce drużynowo Niemcy zajęli także na mistrzostwach świata w lotach w Planicy w 2004, a indywidualnie Schmitt uplasował się na 33. pozycji. Podczas mistrzostw świata w Oberstdorfie w 2005 wspólnie z Michaelem Neumayerem, Michaelem Uhrmannem i Georgiem Späthem zdobył srebrny medal w konkursie drużynowym na normalnej skoczni. Na dużej skoczni Niemcy zajęli piąte miejsce. Schmitt w obu konkursach indywidualnych plasował się w okolicach połowy drugiej dziesiątki. Kolejną dużą imprezą były igrzyska olimpijskie w Turynie w 2006. Drużynowo Niemcy zajęli czwartą pozycję, a w konkursie indywidualnym na dużym obiekcie Schmitt zajął. 19. miejsce. W zawodach indywidualnych na normalnej skoczni nie wystartował. Z tych czterech sezonów najlepsze wyniki uzyskał w sezonie 2003/2004, kiedy to zajął 20.