親戚づきあいの程度や状況にもよりますが、一般的には故人の兄弟・親・子供くらいの関係の方は参列することが多いようです。
もし家族だけで行う場合、主だった親戚には事前に事情を説明しておいたほうがよいでしょう。