Tao bölgesinde yer alan Havag’ın kuruluşuna ilişkin bilgi yoktur. Bununla birlikte burada altı kilise ile iki kalenin varlığına bakarak Havag’ın eski bir yerleşme olduğu söylenebilir. Gürcistan Krallığı sınırları içindeyken 1080’deki Kveli Kalesi Savaşı’nın ardından Büyük Selçukluların eline geçti. Yöre daha sonra Gürcü atabeglerin yönetiminde kaldı. 16. yüzyılda Osmanlılar tarafından fethedildi. Osmanlılar Tao-Klarceti’yi tamamen ele geçirince, bu topraklarda Çıldır Eyaleti adı altında bir idari birim kurdular. Osmanlı kaynaklarında Havag olarak geçen yerleşme, 17. yüzyılda Çıldır Eyaleti’nde Oltu livasının Anzav nahiyesine bağlı bir köydü. Uzun süre Osmanlı yönetimi altında kalan Havag, 1877-1878 Osmanlı-Rus Savaşı’nda Rusların eline geçti. I. Dünya Savaşı’nın sonlarına doğru Rus ordusu bölgeden çekilince Havag 1918-1921 arasında bağımsız olan Gürcistan sınırları içinde kaldı. 1921’de Kızıl Ordu’nun Gürcistan’ı işgal etmesinden sonra Havag yeniden Türkiye'ye katıldı. Havag’ın adı Cumhuriyet döneminde Alatarla olarak değiştirildi.