Não é seguro se a corda é de lâmpadas incandescentes, porque haverá tensão de linha exposta no bulbo quebrado.
Nesse caso, remova a lâmpada quebrada e conecte-a. Se a corda acender (ela possui fiação paralela; é comum para grandes lâmpadas de rosca), então você está bem. Se não acender, você precisará substituir a lâmpada (ela possui fiação em série, comum para pequenas lâmpadas push-in).
Se a corda funciona sem a lâmpada e você não pretende substituí-la, enrole a fita isolante (ou qualquer plástico ou tecido que você tenha disponível) sobre o soquete para que ninguém possa acidentalmente colocar um dedo nela.
As strings de LED podem ou não ter baixa voltagem segura, dependendo de como foram projetadas.