Si bien en 1933 ya existía el Racing Silva, hubo que esperar a principios de 1940 para ver el nacimiento del Silva S.D. Antes de la Guerra los chavales de la Silva se unieron en el Ventorrillo en torno al Maravillas por falta de recursos económicos, pero llegaron las desavenencias y los jóvenes jugadores decidieron volver a su barrio y formar equipo propio.
Buscaron directiva y encontraron apoyo entre varios aficionados, que con los jugadores formaron la primera junta presidida por Manuel Mallo Souto.
La primera temporada 1940-41 comenzó no sin antes superar varios problemas derivados de la penuria económica, pero finalmente el Silva estuvo en esa competición que organizaba la Federación Gallega de Fútbol. Fue el punto de arranque al que seguiría otra campaña, quizá la más gloriosa de la historia del Silva.
A finales de la década de los 50 se forma el equipo de juveniles, a la vista del fruto que daba a otros clubes y debido a que nuestra sociedad se había quedado un poco atrás en este aspecto, por cuestiones económicas, había llegado el momento de dar un nuevo paso, que seria decisivo en la historia de la sociedad, como prueba fue que en la tercera temporada de vida logró el título de campeón de La Coruña.
Desde entonces, con altibajos, como la mayoría de los equipos modestos, el Silva SD lucha por mejorar su historial, por el trabajo con la cantera y dar una formación en especial a los más pequeños del barrio.