กู้สร้างบ้าน ต้องใช้บริษัทรับสร้างบ้านที่ธนาคารกำหนด?

อยากกู้สร้างบ้านที่ต่างจังหวัด ในที่ดินตัวเอง  ธนาคารให้ติดต่อบริษัทรับสร้างบ้านที่อยู่ในสมาคมเท่านั้น ผมลองศึกษาแต่ละเจ้า รับสร้างแบบบ้านอลังการมากๆ  ความตั้งใจผมแค่อยากสร้างหลังเล็กๆงบไม่เกินล้าน แบบนี้จะมีทางออกอย่างไรบ้างครับ