Пока я не вышла замуж, моя семья была из трех человек: мама, брат и я.
Потом - я и муж.
Еще немного потом - муж, я и сын.
(Вероятно, когда (если) сын женится, то опять будет второй вариант).
Все остальные родственники в различных сочетаниях уже не семья... для меня. Почему-то так. (Хотя семейством еще могу назвать, если жить приходится в одном доме ).
).