Родился в Москве в семье книжного графика Евгения Авалиани. Окончив географический факультет МГУ по специальности «экономическая география СССР», долгое время работал по специальности, потом, в связи с обострением болезни Бехтерева — сторожем.
В конце 60-х — начале 70-х примыкал к московской литературной группе Иоффе-Сабурова. Работал во многих жанрах, в том числе палиндрома и визуальной поэзии. Не публиковался до 1992 г., с 1995 по 2000 гг. выпустил четыре книги стихов и других экспериментальных текстов. Погиб под колёсами автомобиля.
Стихи Авалиани сочетают лёгкость звучания и изящество фразировки с герметичной образностью, следуя лирике Мандельштама начала 1930-х годов. Однако наибольшее признание Авалиани принесли не они. Прежде всего, наряду с Владимиром Гершуни, Еленой Кацюбой и, несколько ранее, Николаем Ладыгиным, Авалиани является основоположником современного русского палиндрома. Исключительный вклад внесён Авалиани и в развитие русской визуальной поэзии: Авалиани изобрёл и довёл до совершенства своеобразную поэтическую форму, получившую название листовертень — это текст небольшого размера (от одного слова до нескольких строк), выписанный таким образом, чтобы при переворачивании (на 180°, реже на 90°) читался уже другой текст (в отдельных случаях тот же самый, иногда два прочтения составляют вместе рифмованное двустишие или четверостишие). Как отмечал Дмитрий Кузьмин,
Авалиани также развил и превратил в особую литературную форму панторифмы и анаграммы, экспериментировал с некоторыми другими редкими и трудными приёмами стихосложения.