วัดชลอ เป็นวัดเก่าแก่ตั้งแต่สมัยอยุธยาตอนปลาย สันนิษฐานว่าสร้างขึ้นราว พ.ศ. 2275 ในรัชสมัยพระเจ้าอยู่หัวบรมโกศ ตั้งอยู่ริมคลองบางกอกน้อยตอนเหนือ หรือ เดิมเรียกว่า คลองลัดบางกรวย ที่เชื่อมต่อกับคลองอ้อมนนท์และคลองบางกรวยซึ่งขุดขึ้นเมื่อปี พ.ศ. 2081  ในรัชสมัยสมเด็จพระมหาจักรพรรดิ แห่งกรุงศรีอยุธยา

          บริเวณที่ตั้งของวัดชลอเป็นโค้งน้ำที่ไหลเชี่ยว และเป็นทางแยก จึงมักมีอุบัติเหตุเรือล่มและมีคนจมน้ำเสียชีวิตอยู่เสมอ จนมีตำนานเล่าว่า เมื่อพระเจ้าอยู่หัวบรมโกศเสด็จพระราชดำเนินทางชลมารคผ่านคลองลัดบางกรวย ทรงทอดพระเนตรเห็นว่าบริเวณนี้น่าจะสร้างวัด เพื่อเป็นที่ยึดเหนี่ยวจิตใจของชาวบ้าน รวมถึงเป็นจุดสังเกตให้คนเรือได้ลดความเร็วและใช้ความระมัดระวังมากยิ่งขึ้นเมื่อมาถึงบริเวณนี้ ส่วนชื่อวัดชลอนั้น สันนิษฐานว่าได้รับพระราชทานนามจากพระเจ้าอยู่หัวบรมโกศ ไม่ก็ว่ามาจากคำว่า ช้า และ รอ คือ หยุดรอดูว่าจะมีเรือมาจากทิศไหนบ้าง และกลายเป็นชลอในที่สุด