Я уже точно не помню, кажется нужно найти иконку, которая стоит по умолчанию, узнать ее название.
Потом свою иконку с таким же названием вставить в туже директорию где находится оригинальная с заменой.
(Проблема в том, что их может быть несколько, разного размера, желательно все заменить) после перезапустить x-сервер.
У меня все получилось, так что пробуй.