Может не к месту, но по-моему это стало проявляться когда я регулярно (по таймеру) раз в секунду проверяю свойство Connected у класса TcpClient.
Ну отцы! Отзовитесь! Кто сталкивался?!