可以，但必須先取得袋地通行權。根據建築法第42條之規定，建築基地與建築線應相連接，而「建築線」就是建築物與道路的邊界，土地必須和道路相鄰才有建築線，因此袋地必須取得通行權才能蓋房子。