С телефона не пробовал, если удобно мож так и оставить, а вот с пультом помучался - ir адаптер "отваливался" регулярно и
работало с задержкой явной (два разных пробовал), говорят что у "синезубых" пультов такой проблемы нет. Кстати мышь Logitech с доп функциями и на Ubuntu вяжется, только помудрить в "терминальчике" надо.