Savannah, Georgia, de woelige jaren '30. Kapitein Rannulph Junah was ooit een veelbelovend golfspeler. Na de oorlog is hij verbitterd geraakt en zijn interesse voor het spel is verdwenen. Toch gaat hij akkoord om een partijtje te spelen tegen twee golfkampioenen, Bobby Jones en Walter Hagen. Junah wordt hierbij bijgestaan door Bagger Vance, zijn mysterieuze caddie. Het golfspelen laat Junah echter volledig koud en in het perspectief van de oorlog, vindt hij het niet alleen dwaas en absurd, maar ook beledigend om deze sport nog te beoefenen.

Een korte reis terug naar huis verandert in een langer verblijf wanneer Eric klem komt te zitten tussen het afspreken met zijn twee zussen en het veroveren van zijn oude pokergroep. Hoe meer Eric zijn bezoek verlengt om te bewijzen dat hij nog steeds de beste pokerspeler van de stad is, hoe moeilijker het wordt om de oude breuklijnen in zijn relatie met zijn zus Rachel te vermijden. Terwijl hun zusje Maggie de intieme wereld die ze ooit deelden probeert te herscheppen, worden Eric en Rachel geconfronteerd met de kloof tussen hun jeugd en de volwassenen die ze nu zijn geworden.