В данном слове ударение должно быть поставлено на слог со второй буквой А — кавкАзца.
Опытному оперативнику показалось странным (для кавка́зца), что родственник не знает о том, что его родственник уже два года здесь не живет.
— Фазиль Искандер, Сандро из Чегема
– За помочью прибегал? – обратился Григорий, все еще неприязненно ощущая на ладони рукопожатие кавка́зца.
— Михаил Шолохов, Тихий Дон
– С кем это ты совет держал, с князем, что ли? – перебил его Григорий, вспомнив совещание, происходившее в этой же комнате зимой, и подполковника-кавка́зца.
— Михаил Шолохов, Тихий Дон
В Париже встретил старого друга, кавка́зца Таухана Керефова.
— Феликс Юсупов, Конец Распутина. Мемуары
Дальше - кавалерийский офицер кричал на пучеглазого кавка́зца, продающего кедровые орешки: "Пшел, здесь не разрешено торговать".
— Алексей Толстой, Гиперболоид инженера Гарина. Аэлита. Похождения Невзорова, или Ибикус