Он опасается, что на борту те единственные люди, бояться которых он имеет все основания: пираты из команды Флинта. Бен Ганн скорее всего знал про карту. Если даже не знал, то в любом случае понимал, что никто не зарывает клады для того, чтобы их откопали пару веков спустя совершенно чужие люди. Пираты, своей кровью заработавшие золото в абордажных схватках, при первой же возможности за ним вернутся.