地目が畑でも、建物を建てられる場合と建てられない場合があります。

まず、用途地域を確認してください。
市街化区域内であれば、農地転用の届出を出せば建築可能です。
市街化調整区域であっても、集落地内開発制度指定地区内であれば、一定の条件をクリアの上建物を建築する事ができます。

その他接道など確認しなければなりませんので、一度ご相談ください。