Gołębiem (1791) książę Ludwik zyskał nawet sympatię społeczeństwa, które skłonne było, nie bez inspiracji Czartoryskich, upatrywać w nim spadkobiercę tradycji rycerskich. Sytuacja zmieniła się w 1792, kiedy jako głównodowodzący wojsk litewskich działał na korzyść Rosji i Prus. Czartoryscy zdecydowali się poprzeć córkę w jej dążeniu do rozwodu z mężem, który nie tylko był brutalem, ale i zyskał opinię narodowego zdrajcy. Proces rozwodowy rozpoczął się w maju 1792 r., mimo że Maria była już matką Adama Karola Wilhelma, urodzonego 16 stycznia 1792 w Puławach. Unieważnienia małżeństwa (Wirtemberska napisała w prośbie, że była do tego związku zmuszona), dokonał sąd konsystorza warszawskiego, a zatwierdził sąd metropolity