Тем временем до Каликута донеслись вести, что приближается новый португальский флот, и Каликут готовился отразить морское нападение.

Египетский лекарь все еще находился в городе. По вечерам он тайком проходил в дом миланцев и, помолившись перед распятием, чтобы очиститься от накопившихся за день грехов, начинал уговаривать пушкарей покинуть саморина. Шпион обещал миланцам подготовить их возвращение на родину.

Теперь надо было как-то незаметно выбраться из города. Вартема присоединился к персидским купцам и решил уже, что благополучно покинет Каликут, когда на борт корабля поднялись таможенники. Они заявили, что египетскому врачу запрещено покидать город, ибо саморину известно, что он знает европейские языки, а потому не исключено, что он лазутчик и может выдать военные секреты португальцам. Оказывается, визиты Вартемы к миланцам не прошли незамеченными.

Вартеме надо было спешить. Через несколько дней он незаметно покинул вечером город и прошел несколько миль по берегу, пока не наткнулся на рыбака, который за золотую монету согласился отвезти его к португальской крепости и Каннануре.

Он продолжал соблюдать осторожность. Остановился в мусульманской части Каннанура и, только дождавшись ночи, пробрался в дом к коменданту крепости. Тот немедленно снарядил специальный корабль и отправил на нем Вартему к д'Алмейде, португальскому вице-королю Индии. Вартема передал вице-королю все собранные сведения, а также убедил д'Алмейду, что сейчас самый благоприятный момент, чтобы разделаться с миланцами.

Вартема вернулся в Каннанур, неся с собой приказ д'Алмейды выдать ему «столько денег, сколько будет необходимо».

В Каннануре Вартема нашел индуса, который был настолько беден, что продал себя в рабство. Перекупив его у хозяина, шпион обещал ему свободу, если тот отнесет в Каликут письмо миланцам. Сам Вартема уже не осмеливался возвращаться в город.

В письме говорилось, что Вартема добился у вице-короля прощения для артиллеристов и даже денег на дорогу домой. Деньги были пересланы с индусом, ибо Вартема справедливо полагал, что они будут самым сильным аргументом в пользу правдивости письма и намерений португальцев. Вартема писал также, чтобы миланцы оставили в Каликуте все, кроме золота и драгоценностей. Он знал, что миланцы скупали там драгоценные камни и накопили их изрядное количество.