Ох, по скользкой дороге идете ;) Асинхронные каналы не лучший способ передачи речи. Буферировать надо, щелчки опять таки неизбежны ввиду разной частоты кварцев в блоках. Ну да ладно, не хочете синхронный канал - дело ваше. А почему стандартный кофидек за 0,9$ был отвергнут? Ну упакуйте его в RS485 и передавайте.
Да, не хотите реле - используйте оптореле. Что-то типа дорогущих PVG612 или подешевле PVT312.