Из Москвы в Тобольск ссыльных обычно сопровождали гвардейские офицеры и солдаты. Н. Б. Долгорукая вспоминает, что в Тобольске гвардейский офицер передал ссыльных местному конвою, «с рук на руки, как арестантов». «Плакал очень при расставании офицер,– продолжает она,– и говорил: "Теперь-то вы натерпитесь всякого горя, это люди необычайные, они с вами будут поступать, как с подлыми, никаково снисхождения от них не будет". И так мы все плакали, будто с сродником расставались, по крайней мере привыкли к нему: как ни худо было, да он нас знал в благополучии, так несколько совестно было ему сурово с нами поступать». Это очень важное замечание – гвардейский офицер считался «своим», он был «прикормлен». Для новой же, сибирской, охраны петербургские знаменитости были уже просто ссыльными, хотя и богатыми.

Но жизнь есть жизнь, и ссыльным нужно было искать общий язык и с теми, на кого они вчера и не взглянули бы. Долгорукая описывает, как ей приходилось, можно сказать, прикрывая носик батистовым платочком, иметь дело с «мужланами»: «Принуждены новому командиру покорятца, все способы искали, как бы его приласкать, не могли найтить, да в ком и найтить? Дай Бог и горе терпеть, да с умным человеком; какой этот глупый офицер был, из крестьян, да заслужил чин капитанской. Он думал о себе, что он очень великой человек и, сколько можно, надобно нас жестоко содержать, яко преступников. Ему подло с нами и говорить, однако со всею своею спесью ходил к нам обедать. Изобразите это одно: сходственно ли с умным человеком? В чем он хаживал: епанча солдацская на одну рубашку, да туфли на босу ногу, и так с нами сидит? Я была всех моложе и невоздержана, не могу терпеть, чтоб не смеятца, видя такую смешную позитуру…»

Место ссылки, если оно не было определено приговором, уточнялось администрацией сибирского губернатора. Обер-церемониймейстер Санти был отправлен в Сибирь с приговором: «Сослать из Москвы в ссылку под крепким караулом в Тобольск, а из Тобольска – в дальнюю сибирскую крепость немедленно». В Тобольске такой крепостью назначили Якутск. Но все же по столь неопределенному адресу чаще всего везли «подлых» преступников. Людям известным, знатным обычно определяли достаточно точный адрес и заранее готовили для них место.

Больше всего страдали те, кого отправляли по приговору: «сослать в самые дольные сибирские городы». Где именно они находились, порой не знал никто, не только в Академии наук, но и в Сибирской губернской канцелярии в Тобольске. В 1741 году герцога Эрнста Иоганна Бирона и обоих его братьев решили заслать в «самые дальние городы»: самого бывшего регента – в Пелым, Карла – в Колымский острог Якутского уезда, а Густава – в Ярманг Якутского же уезда.

Кто из правительства Анны Леопольдовны придумал этот Ярманг – неизвестно. Но голова заболела у сибирского губернатора, который 30 ноября 1741 года сообщал в Петербург, что «о вышепомянутых Колымском остроге, да Ярманге, куда означенных арестантов послать велено, известия в Сибирской губернской канцелярии не имеется, кроме имеющейся ландкарты, по которой оныя зимовья найдены: Нижнее Колымское, Среднее Колымское, да Верхнее Колымское ж, которыя имется по мере той карты в расстоянии от Якутека: Нижний в дву тысячах верстах, Средний – в тысяче пятистах пятидесяти, Верхний – в тысяче осьмистах пятидесяти верстах».

Далее выяснилось, что «острожка Ярманга на той карте не означено, и таких людей, кто б то место знал, в Тобольску не имеется. Токмо уведано, чрез прибывшаго из Охотска казака, который про оные острожки слыхал, что из оных острожков называется Нижний Колымский острог Ярмангою, потому что в тот острог бывает съезд», по-видимому, имелась в виду «ярманка» – ярмарка.