Тадж был построен Шахом Джаханом в память о его третьей жене Мумтаз Махал, которая умерла при родах их 14-го ребенка в 1631 году. Смерть Мумтаз так разбила сердце императора, что, как говорят, его волосы поседели буквально за одну ночь. Строительство Таджа началось в следующем году; хотя считается, что главное здание было построено за восемь лет, весь комплекс был завершен только в 1653 году. Вскоре после его завершения Шах Джахан был свергнут своим сыном Аурангзебом и заключен в тюрьму в Форте Агры, где до конца своих дней он мог только смотреть на свое творение через окно. После своей смерти в 1666 году Шах Джахан был похоронен здесь рядом со своей любимой Мумтаз.