К весне 1914 года «Св. Анна» уже прошла меридиан Земли Рудольфа — самого северного из островов Земли Франца-Иосифа. В бедственном положении судно продолжало медленно, петлями, подвигаться к западу.

Не совсем благополучно было на «Св. Анне» и со стороны взаимоотношений плывших на ней. Еще в январе 1913 года между Брусиловым и штурманом Альбановым произошла крупная размолвка. В результате ее Альбанов просил освободить его от обязанностей штурмана. По объяснениям Альбанова, ссора произошла на почве ненормального судового уклада, изменить который Альбанов не мог. Но главной причиной, приведшей к такому обострению отношений, было общее нервное состояние, царившее на корабле. Из разных мелких столкновений, неизбежных при тесном сожительстве в тяжелых условиях, между двумя водителями «Анны» возникла крупная размолвка, перешедшая во вражду. В результате штурман «Анны» очутился на положении пассажира.

Девятого января 1914 года Альбанов обратился к Брусилову с просьбой дать ему материал для постройки каяка и саней: он решил уйти с судна на Землю Франца-Иосифа, близ которой «Св. Анна» в это время дрейфовала. Брусилов разрешил Альбанову воспользоваться всем необходимым.

Альбанов рассчитывал дойти, до Земли Франца-Иосифа по плавучему льду. Он знал о существовании домика Джексона на мысе Флора и считал вероятным, что найдет там и некоторое количество провианта. С мыса Флора Альбанов предполагал пройти к населенным местностям Шпицбергена или на Новую Землю.

Жизнь на «Анне», в его время была тяжела. Видя приготовления Альбанова, многие задумались над своим положением. Через две недели большая часть команды обратилась к Брусилову за разрешением также покинуть судно. Понимая, что с уходом части команды тяжелый вопрос о провизии разрешается довольно удовлетворительно, Брусилов после некоторого размышления не стал препятствовать желающим уйти.