На самом деле она изначально звучало как G'izantiya, европейские авторы произносили это на свой лад и она звучало как Византия. Это слово не исчезло бесследно. В современной Турции топоним ГАЗИАНТЕП и это есть ГИЗантия. А слово ГИЗ укороченный - ОГУЗ.
Она существует в словах КИРК-ГИЗ, ныне КИРГИЗ, ЧИНГИЗ и многих других словах.