1º: Puede agregar una identificación única de usuario en la tabla de direcciones.
2do: Y también mantenga la clave principal de auto_incremento en la tabla de direcciones, por qué significa que cuando va a editar la dirección significa que necesita actualizar la correcta para que sea útil en el futuro, así que mantenga una columna para eso.