По wmclass, например. А то некоторые приложения (например, urxvt, tuxcmd, некоторые другие), отображаются одинаково.
fbpanel это умеет, но я сейчас использую tint2. В конфиге самого openbox такой фичи не нашел, devilspie тоже вроде не умеет. У wmctrl вроде есть ключ "I", который, если верить ману, "set the icon name (short title) of the window...". Однако, что бы это ни было, оно работать не хочет, увы.
Есть какие-либо идеи?