Рассмотрим два способа подключения. Первый, ваш маршрутизатор имеет usb разъем и поддержку внешних накопителей. Тогда подключаем его как сетевой диск и, например с помощью VLC (бесплатного и очень продвинутого плеера) открываем этот диск по сети, на котором находиться ваша медиатека. Так же точно можно просто по USB показать путь плееру.
Два других медиа комбайна, которые рекомендовал к использованию KODI и PLEX умеют подключать файлы по сети DLNA из всех возможных источников, сортировать и организовывать библиотеки и многое другое.