你们的协议是你们两个人签订的，没有得到公证是不具有法律效力的，但是孩子的抚养权能不能要回，那要看你各个方面的条件是不是优越于孩子母亲一方，如果是那你就可以到法院起诉要回孩子的抚养权，法院会把孩子判给有利于孩子成长的一方的。