Não dá pra saber com certeza. Gênesis 3:6 diz que Eva comeu do fruto e depois o deu ao marido, que estava com ela, e ele também comeu. Isso mostra que Adão estava com Eva quando recebeu o fruto. O versículo não diz claramente se ele estava ali durante toda a conversa com a serpente.
É possível que Adão tenha ouvido a conversa e permanecido calado. Também é possível que ele tenha se juntado a Eva depois que ela comeu. O relato não menciona uma saída nem uma chegada de Adão, então não podemos afirmar nenhuma das duas coisas como fato.
Uma passagem que ajuda a entender a diferença entre os dois é 1 Timóteo 2:14. Paulo diz que Eva foi enganada, mas Adão não. Isso não prova que Adão estava ausente. Mostra que, ao comer, ele não estava simplesmente acreditando na mentira da serpente do mesmo modo que Eva acreditou. De todo modo, Adão conhecia a ordem de Deus sobre aquela árvore, dada a ele em Gênesis 2:16-17, e desobedeceu.
Por isso, a responsabilidade de Adão não depende de ele ter ouvido a conversa. Romanos 5:12-19 dá destaque ao pecado dele e às consequências desse pecado para a humanidade, mas não usa sua posição perto da árvore como explicação. A resposta mais fiel ao texto é esta: Adão estava com Eva quando comeu o fruto; se estava com ela enquanto a serpente falava, a Bíblia não informa.