你们这种没领结婚证的，不算结婚，也就是不算夫妻关系。所以也就不存在离婚的问题。解除同居关系即可，至于小孩抚养这个问题，要看你们对小孩抚养问题能否达成一致协议。如果不能达成，就只有诉讼到法院等待法院判决了。