Après le saut en avant de 18 mois la saison dernière montrant Wes Genrette proposer aux Pogues de retrouver le trésor de Barbe Noire, la saison 4 remonte dans le temps jusqu'aux événements qui ont conduit à ce moment. Les Pogues ont trouvé l'or à Eldorado, sont retournés aux Outer Banks et se sont engagés à mener une vie "normale". Ils ont construit un nouveau havre de paix, officiellement baptisé "Poguelandia 2.0", où ils vivent et gèrent ensemble une boutique d'appâts, d'articles de pêche et d'excursions qui marche bien. Mais après quelques déboires financiers, John B, Sarah, Kiara, JJ, Pope et Cleo acceptent l'offre de Wes. Les voilà qui replongent dans le jeu de la chasse à l'or et avant même qu'ils ne s'en rendent compte, ils se retrouvent avec des malfrats à leurs trousses qui convoitent le trésor de Barbe Noire. Pendant ce temps, leurs problèmes ne font que croître, les obligeant à remettre en question leur passé, leur présent et leur avenir – qui sont-ils vraiment, le jeu en vaut-il la chandelle et que sont-ils prêts à risquer ?