邻居要在我老家后面的猪圈的遗址上造房子，我和他都没有土地使用权，但这个猪圈是他以前向生产队里买的，猪圈是生产队造的，我是不是可以不让造，急急急！！！！！！！！！！！！！！！！

只要他取得土地批文及规划许可的，你不可以不让他造。如果未取得手续的，法律都不允许他造。

如果他一定要造呢，我是不是可以不让造，
如果他造在我有土地使用权的土地上，我没有告诉他，等他造完了我是不是有权拆

你只能向行政机关申请履行职责，不能以将自己的私行为替代公权。
既然别人侵犯了你的土地使用权，你没有理由保持沉默，即使你原先没告知，但事后还是存在诉权的。