Que me aconsejais?

Buenas, os cuento mi historia.

llevo 17 años con mi novio pero a 800km de distancia.

Se que es una locura pero lo llevabamos bien hasta hace poco pq cada vez es mas complicado.

El problema es que los dos tenemos trabajo fijo, yo de 13 años y el de mas.

Ahora ha surgido la ocasion de que puedo entrar a trabajar a su empresa pero aunque es lo que hemos querido siempre y se que seria la unica solucion para estar juntos me da miedo.

Me da miedo dejar mi trabajo, aunque lo odio y no me hace feliz, pero me da miedo dejarlo.

Y dejar a mi familia es otra cosa que me tira atras.

Quiero estar con el pq lo quiero mucho pero me da miedo dejarlo todo atras, el trabajo pq son muchos años fija y pq no se como me iria en el nuevo y a mi familia, que los echaria mucho de menos. 
Que me aconsejais?