Um die Authentizität zu wahren, wollte Verbinski den Film gerne in der Karibik drehen. Einen geeigneten Drehort zu finden, stellte sich allerdings als schwierig heraus, weil viele potentiell geeignete Orte bereits stark besiedelt oder touristisch erschlossen waren. Schließlich entschied man sich für das vergleichsweise gering besiedelte St. Vincent . Dort ließ man zusätzliche Bootsstege und Gebäude fertigen, die für die Dreharbeiten als Szenerie nötig waren. Problematisch war, dass auf der Insel nur kleine Flugzeuge landen konnten. Schauspieler, Nahrungsmittel und andere für die Dreharbeiten benötigte Teile mussten daher vor allem von St. Lucia aus, einer benachbarten Insel, mit einem Schiff nach St. Vincent transportiert werden. Für die Dreharbeiten konnten mehrere 100 Einheimische als Unterstützung für die Filmmannschaft bei den Dreharbeiten eingestellt werden. In dem Themenpark Marineland in Kalifornien wurde ein Fort errichtet, welches für die Szenerie des Hafens von Port Royal benötigt wurde. Es wurde aus Zement und Gipswänden hergestellt und ist eine reine Fassade. Der Drehort wurde speziell wegen der Ähnlichkeit der Sonnenverläufe in Marineland und St. Vincent gewählt. Das Haus des Gouverneurs konnte kein reales sein, da es im Film von den Piraten in Brand gesetzt und teilweise zerstört werden sollte. Aus diesem Grund baute man die inneren Räumlichkeiten in den Raleigh Studios in Manhattan Beach und errichtete eine adäquate Fassade in Marineland, die in Brand gesetzt werden konnte. Man versuchte, ihren Stil möglichst an die Höhle in der Attraktion Pirates of the Caribbean des Disney-Freizeitparks anzupassen. Da die Höhle mit Wasser gefüllt sein sollte, stellten die Dreharbeiten eine besondere Herausforderung an die Filmmannschaft dar.
	Du schuldest Davy Jones 31676 Besucher-Seelen !