สร้างบ้านในที่ดินคนอื่นจะถูกฟ้องขับไล่ได้หรือไม่

เราอาศัยอยู่ในที่ดินของพ่อแม่มาตั้งแต่เกิด  ต่อมาพี่สาวได้มรดกที่ดินนี้ไว้แต่เพียงผู้เดียว  เราตัวคนเดียวไม่ได้แต่งงานก็เลยสร้างบ้านอยู่ในบริเวณเดียวกันโดยพี่สาวให้อนุญาตปลูกสร้าง  จำไม่ได้ว่าพี่สาวหรือตัวเราเป็นผู้ขออนุญาตต่อเขต  น่าจะเป็นพี่สาวเพราะเป็นเจ้าของโฉนด  แต่น้ำประปาไฟฟ้าเราเป็นคนขอ  และเรามีชื่อเป็นเจ้าบ้านในเลขที่บ้านที่ขอใหม่นี้ด้วย

อยู่มาหลายสิบปีเพิ่งมามีปัญหาไม่นานนี้เพราะมีเรื่องถกเถียงกันซึ่งก็ไม่ใช่เรื่องใหญ่โตอะไร  แต่พี่เขาโกรธและไม่พูดกับเรา  เราก็เลยเกรงว่าเขาจะสามารถไล่เราออกจากที่ดินเขาได้หรือไม่  เพราะถึงแม้เราเป็นชื่อเจ้าของบ้านที่สร้างแต่ไม่ใช่เจ้าของที่ดิน

ขอเรียนถามผู้รู้ด้วย  ขอบคุณค่ะ