Говорили против так, что "гнев снова прилил к остриям мечей". То есть, кто-то замахнулся на них. И только вмешательство Арафинвэ и Артаресто предотвратило худшее, чем в Альквалондэ. Из текста понятно, что они были против предводительства Феанаро.
А зачем, ему, спрашивается, брать с собой тех, кто с самого начала настроен против него? Тут уж не только такая срывная личность, а любой военный командир предпочел бы оставить их дома.

Выходит, прав был хоть отчасти Феанаро, когда сказал на берегу Лосгара: "То, что я оставил, лишь помеха"?
И остальные нолдор пришли лишь потому, что сдержал свое слово "следовать" Нолофинвэ. Кстати, сам-то Феанаро на слова брата в Маханаксаре ничего не ответил! Он подал руку - то есть, принял слово, сам ни в чем не обязуясь. Это клятвопреступлением не назовешь. И предательством. Разве что недомыслием.
Ведь все, кроме самого Нолофинвэ, по сути, могли повернуть обратно - в смысле, никто не был связан словом драться с Морготом или помогать Феанарионам. Но... как уже сказано - верность своему вождю.
Есть еще один оттенок в сущности эльфийской преданности: Анайрэ осталась за морем, а Иримэ ушла с братом, с Нолофинвэ, из любви к нему. Чисто личные мотивы, без малейшего намека на внешние обязательства типа "я другому отдана и буду век ему верна"!