Não é errado por si só. A Bíblia não diz que um cristão só pode participar das reuniões de uma igreja. Você pode, por exemplo, ter uma igreja onde participa regularmente e visitar outra, ou frequentar uma reunião em outra congregação por uma razão específica.
A questão mais importante é se essa rotina permite que você viva aquilo que a Bíblia ensina sobre fazer parte de uma igreja. Os primeiros cristãos não se reuniam apenas pra assistir a encontros. Eles aprendiam juntos, oravam, compartilhavam a vida e cuidavam uns dos outros (Atos 2:41-47). Paulo também ensina que Deus dá capacidades diferentes aos cristãos pra que ajudem uns aos outros a crescer na fé (Efésios 4:11-16; 1 Coríntios 12:4-7).
Por isso, vale pensar: em qual comunidade as pessoas me conhecem, podem cuidar de mim e contam comigo? Se frequentar duas igrejas ajuda você a aprender e servir, sem deixar essas responsabilidades de lado, não há motivo bíblico pra chamar isso de pecado. Mas, se você passa de uma reunião pra outra sem criar vínculos em lugar nenhum, pode acabar recebendo ensino e companhia sem participar de fato da vida de nenhuma comunidade.
Também não há problema em procurar uma igreja onde a Bíblia seja ensinada com fidelidade e onde você possa crescer. Música, horários e amizades podem entrar nessa escolha. Só é bom lembrar que uma igreja não existe apenas pra oferecer tudo o que gostamos: seus membros também precisam uns dos outros, inclusive quando surgem dificuldades (Gálatas 6:2; Hebreus 10:24-25).
Então, você não precisa escolher entre duas igrejas por medo de estar quebrando uma regra que a Bíblia não dá. Procure, acima de tudo, ter uma comunidade com a qual você esteja realmente comprometido. A partir daí, participar de atividades em outras igrejas pode ser algo bom, desde que isso não substitua os relacionamentos e o serviço que fazem parte da vida cristã.