จะย้ายทะเบียนบ้านทำไงคะ

สวัสดีค่ะคือแฟนเราจะย้ายทะเบียนบ้านมาอยู่ทะเบียนบ้านเราแต่ว่าปู่แฟน(เจ้าบ้านแฟน)เขาไม่ยอมไปเซ็นเอกสารการย้ายให้แบบนี้เราทำไงได้บ้างคะ(สาเหตุที่จะย้ายคือปู่ไม่อยากให้หลานเขามีแฟนค่ะมันลามไปจนถึงขั้นแฟนจะไปสมัครงานจะต้องใช้สำเนาทะเบียนบ้านปู่ก็ไม่ยอมให้ทะเบียนบ้านไปถ่ายถ้าไม่เลิกกับเรา)