ในปี พ.ศ. 2451-2452 พระราชชายาดารารัศมีทรงพิจารณาเห็นว่า (กู่) อนุสาวรีย์เจ้าผู้ครองนครและพระประยูรญาติทั้งหลายตั้งอยู่ใกล้ริมฝั่งแม่น้ำปิง ทางทิศตะวันตก (ตลาดวโรรสแถวตรอกข่วงเมรุ) เป็นสถานที่ที่ไม่เหมาะสม เนื่องจากในฤดูฝน น้ำก็มักจะเข้าไปท่วมขังอยู่เป็นประจำ จึงย้ายมาตั้งไว้ที่วัดสวนดอกจนตราบทุกวันนี้