พระพุทธรูปทั้ง 5 นี้เป็นพี่น้องกันก็มาจากตำนานที่เล่าสืบต่อกันมาว่า มีพี่น้องชาวเมืองเหนือ 5 คน บวชเป็นพระภิกษุและสำเร็จเป็นพระอริยบุคคล มีอำนาจทางจิตมาก ได้ตั้งจิตอธิษฐานร่วมกันว่าจะขอบำเพ็ญบารมีช่วยสัตว์โลกให้พ้นทุกข์ แม้ตายไปแล้ว ก็จะสร้างบารมีช่วยสัตว์โลกให้พ้นทุกข์ต่อไป จนกว่าจะถึงซึ่งนิพพาน
"เกิดมาชาตินี้จะขอบำเพ็ญบารมีช่วยสัตว์โลกให้พ้นทุกข์ แม้ตายไปแล้ว ก็จะสร้างบารมีช่วยสัตว์โลกให้พ้นทุกข์ต่อไป จนกว่าจะถึงซึ่งนิพพาน"
และเมื่อพระภิกษุทั้งห้ามรณภาพไปแล้ว ก็ได้เข้ามาสถิตอยู่ในพระพุทธรูปทั้งห้าองค์และแสดงปาฏิหาริย์ให้พระพุทธรูปทั้งห้าองค์ลอยน้ำมาทางใต้ตามแม่น้ำทั้ง 5 สาย และมีชาวบ้านมาพบเจอจึงได้นำพระพุทธรูปเหล่านั้นขึ้นฝั่งและนำไปประดิษฐานไว้ตามวัดใกล้เคียงกับจุดที่ชะลอองค์พระขึ้นจากแม่น้ำ