Родился в Одессе, в семье железнодорожников. Однако родители его были родом из Беларуси, куда и вернулись вместе с сыном в 1922 году - в деревню Загорье Гродненской области. В те годы, после советско-польской войны, деревня находилась на территории Польши.

В 1931 году окончил польскую семилетнюю школу, поступил в гимназию, однако не мог в ней учиться из-за материальных затруднений. К тому же у Брыля рано умер отец и он уже в 14 лет должен был стать кормильцем семьи. Дальнейшее образование будущий писатель получал самостоятельно, с помощью многочисленных книг, которые добывал любыми способами.

В родной деревне Брыль даже организовал драматический кружок и ставил там произведения белорусских авторов, а также польских и русских ,но в переводе на белорусский язык.

В 1939 году призван в польскую армию, служил в морской пехоте пулеметчиком. В сентябре 1939 года участвовал в боях под Гдыней, но попал в немецкий плен. Осенью 1941 сбежал и вернулся на родину. Присоединился к советским партизанам. С октября 1942 года был связным партизанской бригады имени Жукова, с марта по июль 1944 года - партизан-разведчик бригады «Комсомолец», редактор газеты «Сцяг свабоды» и сатирического листка «Партызанскае жыгала». Воспоминания о военных годах во многом описаны в романе Брыля "Птушкі і гнёзды".

После освобождения Минска переехал жить туда. Работал в редакции газеты-плаката «Раздавім фашысцкую гадзіну», журналах «Вожык», «Маладосць», «Полымя», в Государственном издательстве Белорусской ССР.

В 1966-1971 - секретарь правления Союза писателей Белорусской ССР. Дважды избирался депутатом Верховного Совета Белорусской ССР (1963-1967, 1980-1985). Председатель Белорусского отделения общества «СССР - Канада» (1967-1990), член Белорусского ПЕН-центра с 1989. Почетный член Национальной академии наук Беларуси (1994).

Скончался 25 июля 2006. Похоронен в Колодищах.