Olyan helyszíneket is meg kell látogatni, amik a filmekben nem szerepelnek teljes valójukban, például Tortuga, Port Royal, Davy Jones szobája, vagy a Roncs Öböl. A játékban több karaktert irányítva az a feladat, hogy összehívd a kalóztanácsot. Ehhez minden kalóz nagyurat meg kell győznöd, vagy úgy, hogy megharcolsz velük, vagy küldetéseket teljesítesz nekik. A történet során Barbossa kapitányt, Jack Sparrow-t, Elizabeth-et és William Turner-t is irányítani kell. A szereplők kinézete, mozgása és képességei a mozifilmekből lettek átemelve, ezzel is fokozva az élethűséget. Sikeres küldetések esetén extra karakterek is megnyithatók.