Стримы, как я вижу, пока могут использоваться в тех случаях, когда нужно специфическое управление принимаемыми данными (например, указывать позицию считывания). Но использование такой возможности я пока вижу только при работе с файлами. Есть сомнения, что при работе с сокетами есть смысл тягать наружу эти стримы.

Таки да, есть смысл оставить только массив байтов