Последствия этой измены не замедляли дать себя знать Сиверсу. Враждебность Вяземского и Голицына уже не встречала отпора и нашла себе новую поддержку в Потемкине, приобретавшем все сильнейшее влияние, а также во все возраставшем равнодушии Екатерины к вопросам внутренней политики. В 1781 г. Сиверсу пришлось подать в отставку. За ним было оставлено управление водными путями сообщения, недавно устроенными в его губернии. Через год у него отняли и эту должность, чтоб отдать ее Брюсу, шотландцу, мужу одной из наперсниц Екатерины. Он удалился в свое имение Бауенгоф в Лифляндии, где прожил десять лет, забытый всеми. Чтобы извлечь его оттуда и вписать в его биографию последний эпизод – может быть, самый блестящий из всех – понадобилась смерть Потемкина и... второй раздел Польши.

После последней попытки к восстановлению и последнего призыва к оружию (май—июль 1792 г.), несчастная республика отдана была во власть победителя. Необходим был ловкий человек, с твердой рукой, который сумел бы сломить сопротивление и положить конец последним вспышкам возмущения. Екатерина вспомнила о Сиверсе. Он знал в Лондоне несчастного Понятовского, тогда простого, младшего сына в семье. Они вместе кутили. Сиверс встретил его в Варшаве королем, полулишенным трона, и должен был докончить его падение. Любопытна и трогательна была, вероятно, встреча этих двух людей под золочеными потолками дворца Вазы. Любопытны также и трогательны письма, писанные в это время Сиверсом к одной из его дочерей, г-же Гюнцель. Жизнь его – пытка! Какое мучение быть обязанным душить такую великую и благородную нацию, унижать короля, достойного лучшей участи! Почести, которыми его окружают. Почтение, которое указывают, как русскому посланнику, ненавистны ему. С каким наслаждением он вернулся бы в уединение Бауенгофа, с его тенистыми аллеями и цветником! Только одни цветы, которые ему присылают сюда, и некоторые сорта, которых он разводит в теплицах своего дворца, вносят немного радости в его жизнь. С какой готовностью он отказался бы от ненавистной должности, если бы не сознавал, что служит в ней делу всего человечества и самой Польши! Он писал именно этими словами и, может быть, действительно думал так. А между тем той же рукой он подписывает распоряжение за распоряжением, выполняя с неутомимой строгостью приказания, получаемые из Петербурга; штыками сгоняет на гродненский сейм избирателей-депутатов, призванных для голосования за расчленение отечества; мучает несчастного короля, «столь достойного лучшей участи», чтобы вырвать у него согласие на путешествие в Гродно, где должна была завершиться его судьба; не останавливается ни перед каким запугиванием, ни перед каким насилием до тех пор, пока ему не удастся потащить туда, как на бойню, и короля, и депутатов, побежденных, окровавленных, задыхающихся.

А там опять новые ломания! Только и речи, что о цветах, которые он находит возможным собирать в импровизированном саду! Сердце его все продолжает, как Варшаве, обливаться кровью при виде страданий, которые он пытается облегчить! Постоянные усилия совести извлечь из стольких зол крупицу добра для порученной ему страны! И трогательное умиление, крокодиловы слезы при пении Камелли, авантюристки, экс-фаворитки короля, дающей в честь Сиверса концерт у папского нунция! А в то же время, повинуясь его приказанию, солдаты Игельстрема направляют пушки на зал сейма и в течение целых суток не выпускают из нее депутатов: ни один не выйдет, прежде чем состоится подача голосов, такая, какую ожидают от них.

Действовал ли он бессознательно, как, по-видимому, находил его биограф? Не уехал ли он из своего тенистого Бауенгофа, не взвесив хорошенько возлагаемых на него обязанностей? Нет: вот письмо к дочери, где он прямо и откровенно хвалится совершенным делом. И затем следует награда: пожалование ему трех тысяч польских крестьян, от которых он не отказывается. Лучший довод в его пользу или, по крайней мере, говорящий за него, исходит с другой стороны. Настает минута, когда в Петербурге находят, что он еще недостаточно сделал, что рука у него не достаточно тяжела. Его отзывают внезапно, позорно, требуют даже денежных отчетов, объяснения в тратах на содержание его дома. Сумма значительная: один стол его в Варшаве обходился в 8000 рублей ежемесячно! Но он защищается; уверяет, что сделал все, чего от него могли ожидать – и сделал достаточно – и, наконец, прямо обвиняет нового фаворита Зубова в том, что тот виновен в постигшей его немилости, получив за это от польских дворян бриллиант, который те поднесли ему, и 20 000 дукатов. Письмо, написанное с неслыханной смелостью и силой, показывает новую черту его характера. Польская компания, по-видимому, пробудила в нем человека, не проявлявшегося до тех пор – немецкого рейтара, дремавшего под хорошо выдрессированным чиновником. Екатерина сделала вид, что не понимает его. Она удовольствовалась тем, что отослала мятежного чиновника в Бауенгоф, где он угас в 1808 г.