El conector jack 3.5mm del S5 es muy profundo y rígido. Parece que está a tope, pero falta 1-2 mm para hacer contacto completo.
No tengas miedo de empujar fuerte recto. El conector está diseñado para aguantarlo. No lo dañarás. Es el fallo #1 de audio en S5/S6/S7.