حكم تَرْك جماعة السفر لمن لا يريد الجَمْع؟

السؤال

إذا صلى أحَدٌ صلاة الظهر ولم يجمع معنا صلاة العصر مع المجموعة؛ رغبة في أداء صلاة العصر في وقتها، هل عليه إثم في ترك الجماعة؟