منذ إنشائه ، كان المبنى مصدرًا للإعجاب الذي يتجاوز الثقافة والجغرافيا المفترضة ، وبالتالي فقد كانت الاستجابات الشخصية والعاطفية التي تشارك فيها دائمًا تُظلم التقييمات الدراسية للنصب التذكاري. تقول أسطورة طويلة الأمد أن شاه جهان خطط لإنشاء ضريح في الرخام الأسود كتمثال تاج محل أسود عبر نهر يامونا. تنبع الفكرة من كتابات خيالية لجان بيست تافرنييه ، وهو مسافر أوروبي زار أغرا في عام 1665. تم اقتراح أن ابنه أورانغزيب أطاح بالشاه جهان قبل أن يتم بناؤه. تم اقتراح أن أنقاض الرخام المُسود عبر النهر في حديقة بينت بينت باغ ، محمود ، لدعم هذا الرواية. ومع ذلك ، فقد وجدت الحفريات التي أجريت في التسعينات من القرن العشرين أنها كانت أحجار بيضاء ملونة باللون أسود.
(جون روسلي)