Сначала сокровищами погибшего корабля заинтересовался король Англии Карл I. По его приказу Адмиралтейство в 1641 году обязало потомка шотландского рода Маклинов герцога Арджилла заняться поисками золота в заливе Тобермори. Однако Арджиллу не удалось найти золота на дне залива.

В 1665 году Арджиллы заключили с английским мастером по изготовлению водолазных колоколов Джеймсом Молдом договор на три года, по которому последний имел право заниматься поисками золота, оставляя себе пятую часть найденного. Но водолазный колокол Молда работал плохо, и его часто приходилось ремонтировать.

Спустя три месяца были подняты три бронзовые пушки. В дальнейшем Молд расторгнул договор, намереваясь позднее тайно заняться подъемом сокровищ. Тогда Арджиллы сами соорудили подобный водолазный колокол и стали продолжать поиски. Им удалось поднять еще шесть пушек и несколько деревянных обломков корабля. Однако золота они не нашли.

В 1676 году Арджиллы заключили с другим водолазным мастером Джоном Клером трехлетний договор, по которому тот обязан был отдавать две трети поднятого с корабля золота.

Прошло два месяца, и этот договор также был расторгнут. Арджиллы пригласили шведских подводных мастеров. Но и они ничего не добились.

В 1730 году с «Флоренции» было впервые поднято несколько золотых и серебряных монет и большая бронзовая пушка, на которой были выбиты герб Филиппа II и дата — 1584 год. Эта пушка нашла себе приют в одном из шотландских замков.

Услышав о найденном золоте, герцог Йоркский, адмирал всей Англии и Шотландии, решил завладеть «Флоренцией». Он заявил, что согласно королевскому указу все погибшие у берегов Великобритании суда принадлежат ему. Арджиллы через королевский суд сумели доказать свое право на владение этим кораблем, сославшись на то, что все суда, затонувшие до 1707 года (год объединения Англии и Шотландии) у берегов Шотландии, принадлежат навечно шотландцам, а суда, погибшие позже, — герцогу Йоркскому.