1、你说的流转是互换吧？虽然没有书面互换合同，但你们已实际履行，你们的这个互换行为是合法有效的。 2、对方在土地上建房是违法的，但这并不导致你们的互换行为无效，你们的土地互换仍然是有效的，你不能“收回”土地。