ถามเรื่องการสร้างบ้านในที่ดินคนอื่น

ถ้าเราสร้างบ้านในที่ดินของคนอื่นโดยได้รับการอนุญาติให้สร้างได้  แล้วตอนหลังเกิดมีปัญหากัน เราต้องการจะรื้อบ้านหลังนั้นออกเพื่อนำไปขายต่อ (บ้าน knock down)  แต่เจ้าของที่ดินไม่อนุญาติให้รื้อ ให้เหตุผลว่าเป็นที่ดินของเขา
เพิ่มเติม ไม่ได้มีการเรียกขอเก็บค่าเช่าที่ดิน  อะไรทั้งสิ้นครับ

อยากทราบว่า กรณีนี้ถือว่าบ้านหลังนั้นเป็นกรรมสิทธิ์ของเจ้าของที่ดินเลยหรือเปล่าครับ  ขอบคุณที่เข้ามาอ่านครับ