อยากทราบขั้นตอนเรื่องการฟ้องร้องเอาลูกมาเลี้ยงเอง (ไม่ได้จดทะเบียนกัน)

สวัสดีคะเรามีเรื่องอยากจะขอคำแนะนำจากผู้ที่มีประสบการแบบนี้บ้างคะเราควรที่จะดำเนินการยังไงต่อดีคะ  เรื่องมีอยู่ว่า
เราได้ฝากเลี้ยงลูกไว้กับแม่แฟนเมือปี60และเรากับแฟนก็มาหางานทำผ่านมาปีกว่าๆเรามีปัญญากับแฟนเเละได้เลิกรากันไปเลยคุยกับแม่แฟนว่าจะเอาลูกมาเลี้ยงเองแต่เขาไม่ยอมให้เราก็เลยทิ้งระยะในการที่คุยเรื่องเอาลูกมาเลี้ยงจนมาเมือเดือนก่อนเราขอโอกาสเอาลูกมาเล่นช่วงลูกปิดเทอม น้องอยู่ชั้นอนุบาลนะคะ แต่ฝั่งแม่แฟนไม่ยอม พุดยังไงก็ไม่ยอมให้มา แถมยังให้ทางโรงเรียนของลูกเรามาบล็อกเฟสบุ๊คเราเพื่อนที่จะไม่ให้เราเห็นลูก บอกว่าเรามาวุ่นวายที่เฟสโรงเรียน เราเสียใจมากๆเเม่แฟนบอกว่าเราเป็นคนให้เขาเลี้ยงเอง เราจะไปฟ้องศาลแต่เราไม่รู้จะเริ่มต้นที่ไหน ใครรู้รบกวนตอบเราที เราอยากเลี้ยงลูกเราเอง เราให้ลูกกับเขาไว้เพื่อที่จะมาหางานเก็บเงิน และตอนนี้เราพร้อมแล้วเรามีบ้านเป็นของตัวเองแล้วมีงานเป็นหลักเป็นฐานแล้ว เขาก็กีดกัดเราทุกอย่าง 
เราควรทำไงดีคะ  ขอบพระคุณล่วงหน้าคะ