У вас оба рейса в одном билете или это разные билеты? Если это действительно стыковочный рейс и оба рейса записаны в одном бронировании (в одном билете) , то багаж сразу зарегистрируют до конечного пункта - Кефлавика. Если же вы летите разными билетами (Аэрофлот - билет №1, Исланцы - билет №2), то вы можете либо забрать багаж в Осло и зарегистрироваться на рейс ИсландЭйр на стойке регистрации, либо подойти на стойку транзита в Осло, показать вашу багажную бирку и тогда вас зарегистрируют на рейс и сами перекинут багаж. Оптимальнее всего в данном случае зарегистрироваться он-лайн, а на стойке транзита "прикрепить" багаж к вашей регистрации. Смотрите, как вам удобнее.
Имейте ввиду, ИсландЭйр очень любят терять багаж, поэтому возьмите с собой в ручную кладь все необходимое - умывалку и теплые вещи. В сентябре уже прохладно.