Brycht wurde in Warschau geboren, wo er auch während der Deutschen Besetzung lebte und den Warschauer Aufstand miterlebte. Seinen Vater verlor er während des Zweiten Weltkrieges, als dieser auf der Flucht aus dem Kriegsgefangenenlager in Betting umkam. Nach dem Krieg siedelte Brycht zunächst nach Łódź und dann nach Koszalin, wo er die Grundschule und zwei Jahre des Gymnasiums abschloss. 1951 besuchte er die Offiziersschule in Koszalin und schloss die 9. Klasse ab, wurde jedoch 1952 der Schule verwiesen, da er einen Vorgesetzten zusammengeschlagen hatte. Daher kehrte er nach Łódź zurück und arbeitete in einem Heizkraftwerk. Obwohl er eine Abendschule besuchte, beendete er die 10. Klasse nicht. Als Lyriker debütierte er 1954 mit den Gedichten "Biblioteka" und "Pamięci Tuwima", die in den lokalen Zeitschriften "Łódzki Express Ilustrowany" sowie "Łódź Literacka" veröffentlicht wurden. Weitere Gedichtsveröffentlichungen folgten 1955 in den Zeitschriften "Dziś i jutro, Życie Literackie" und "Kronika". Im September 1955 heiratete er und wurde im Oktober wegen einer Straßenschlägerei verhaftet. Die weitere Haftstrafe wurde jedoch bereits im Februar 1956 erlassen. Als Prosaschriftsteller debütierte er 1956 mit der Erzählung "Ulica Pomarańczowa", die in der Wochenzeitschrift "Kierunki" publiziert wurde.