То есть вы признаете, что вы построили времянку там, куда ткнул пальцем инспектор, а не там, где по плану ваш участок?
Если так, то шансы судиться с земельным комитетом нулевые. Вы не сможете доказать, куда именно он вам тыкал. Вы сами нарушили закон, самовольно построив сооружение на чужом участке, хотя имели законный план на другой участок.
Теперь только вести переговоры с первым хозяином участка, куда вы самовольно залезли. Может он вам какую-то часть и возместит, если у него есть совесть. Ну, а если нет
Он может заявить, что все строил сам, еще и чеки покажет и свидетелей приведет.