W kwietniu 1470 po otwartym wystąpieniu przeciwko swemu bratu i udzieleniu poparcia rebeliantom rok wcześniej, uciekł do Francji wraz z Ryszardem Neville’em, hrabią Warwick.Z inicjatywy króla Francji Ludwika XI doszło do oficjalnego porozumienia między księciem Clarence a obaloną królową Małgorzatą Andegaweńską, którego celem było przywrócenie dynastii Lancasterów na tron Anglii. Pomimo wcześniejszej wrogości – w tym przypisywanego Małgorzacie udziału w zbezczeszczeniu zwłok ojca George'a po bitwie pod Wakefield – zawarcie sojuszu miało charakter czysto polityczny, gdyż obie strony dążyły do obalenia Edwarda IV.
W listopadzie 1470 porozumiał się ze zwolenniczką Lancasterów Małgorzatą Beaufort.
Zmiana stron, porzucenie brata oraz sojusz z dotychczasowymi wrogami sprawiły, że Clarence spotykał się z niechęcią nie tylko ze strony Yorków, ale również Lancasterów. Wobec działań Warwicka, który doprowadził do przywrócenia Henryka VI na tron, utracił nadzieję na objęcie korony. Zwrócił się o przebaczenie do brata, który 11 kwietnia 1471 ponownie objął władzę.
Małżeństwo i potomstwo