อยากเลิกกับสามีแต่ต้องเสียลูกไปด้วย ทำไงดี?

เรื่องของเรามีอยู่ว่า ชีวิตคูของเรากับแฟนไม่ค่อยจะดีเท่าที่ควร คุยกันไม่ค่อยรู้เรื่อง เข้าใจกันยากมาก คุยกันได้ไม่ค่อยนานก็ทะเลาะกัน แฟนเราเป็นคนค่อนข้างดื้อรั้น เป็นคนไม่ค่อยคิดอะไรใช้ชีวิตไปวันๆ(ไม่เคยแสดงให้เห็น)ไม่แสดงความรู้สึกให้เรารู้ว่าเขาคิดยังไง เราต้องคิดต้องวางแผนให้ทุกเรื่อง(โดยเฉพาะเรื่องเงินๆทองๆ)ภาระทุกอย่างตกที่เราคนเดียว(เราต้องดูแลครอบครัวด้วย)มันก็เลนทำให้เรายิ่งเบื่อ มีเขาเหมือนไม่มี มีปัญหาอะไรปรึกษาไม่ค่อยได้(อย่างที่บอกคุยกัรได้ไม่นาน)ทำให้เราต้องคิดเองึนเดียว เลยคิดอยากอยู่คนเดียวให้รู้แล้วรู้รอดไป เคยยอกเลิกกันหลายหน เขาก็ยินดีจะเลิกกับเราหากเราให้ลูกไปกับเขา(เรามีลูกด้วยกัน 1 คนเป็นผู้หญิง อายุ 1 ขวบ 7 เดือน)เราเองก็ไม่อยากทิ้งลูก(ลูกคนแรก)รักเขามากสิ่งสำคัญคือห่วงว่าเขาจะเลี้ยงลูกได้ไหม(กลัวหลายๆอย่าง)ก็เลยยังอยู่ด้วยกันถึงปัจจุบัน ต่างคนต่างทน เราอยากเลิกกับเขาโดยที่เราไม่ต้องเจอหรือติดต่อกันอีก เพราะใจเรามันไม่แข็งพอ อยากเลิกกับเขาทั้งที่ยังรักเขาอยู่ มันรู้สึกแย่น่ะ หากเลิกกันไปก็ไม่อยากรับรู้เรื่องของเขาอีกแล้ว
*อยากขอความคิดเห็นหน่อยค่ะ ว่าเราควรทำยังไง?*