La primera mención escrita del Castillo de Velenje data del año 1275, siendo adquirido por los Señores de Ptuj (alemán "Pettau") en 1322.