En el Samsung Galaxy Note 4 (y en Android en general), es normal que el icono de LTE/4G permanezca visible en la barra de estado aunque estés conectado a WiFi. Android mantiene la conexión de datos móviles en segundo plano para:
El icono de WiFi (abánico) debería aparecer junto al de LTE. Si el WiFi funciona y tienes internet, no hay problema. Si quieres forzar solo WiFi y ahorrar batería:
O ve a Ajustes > Conexiones > Redes móviles y desactiva "Datos móviles" manualmente mientras uses WiFi.