อาคารเอื้อนอาชว์แถมถวัลย์ เดิมเป็นเรือนพำนักของเจ้าจอมเอื้อน ธิดาคนสุดท้องของเจ้าพระยาสุรพันธ์พิสุทธิ์ กับท่านผู้หญิงอู่ณ เรือนพำนักแห่งนี้ ถูกดัดแปลงให้เป็นแหล่งการเรียนรู้ด้านนาฏศิลป์ ตั้งแต่พัฒนาการแรกเริ่มของนาฏศิลป์แห่งกรุงรัตนโกสินทร์การจัดแสดงในอาคารเอื้อนอาชว์แถมถวัลย์ แบ่งออกเป็น 3 ส่วน ดังนี้
ส่วนที่ 1 ชั้นใต้ถุน
- ห้องนาฏยรัตนโกสินทร์
- ห้องนาฏยศาสตราวุธ
- ห้องนาฏยศิลป์สวนสุนันทา
ส่วนที่ 2 ชั้น 1
- ห้องนาฏยสาระ
- ห้องนาฏยพัสตราภรณ์
ส่วนที่ 3 ชั้น 2
- ห้องนาฏยประดิษฐ์
- ห้องนาฏยศิลปิน
- ห้องประวัติเจ้าจอมเอื้อน
- ห้องนาฏยบูชา