Depende muito do contexto.. E o tipo de incômodo pode ser diferente também..
Se for um choro de dor o incômodo será pela criança estar com dor, não por estar ouvindo ela chorar..
Se for de birra por exemplo, aqueles gritos, e sendo birra geralmente terá um adulto gritando também, aí o som incomoda..
Mas parando pra pensar acho que o que me incomoda mais é a reação do adulto responsável pela criança que o choro em si.. Pq se percebo estar tentando acalmar a criança acaba não me incomodando, agora se soa irritado(a), se torna incômodo.. Maluco isso, nunca tinha parado pra pensar..