Если бы сказал что-нибудь сейчас Алеша, на том бы оно и покончилось, но Алеша смолчал, а "молчание его могло быть презрительным", и Коля раздражился уже совсем.
If Alyosha had said a word it would have stopped him, but Alyosha was silent and "it might be the silence of contempt," and that finally irritated Kolya.