На мой взгляд, с вами все в порядке. Есть два типа влечения: спонтанное и ответное. Спонтанное - это когда желание заняться сексом появляется как бы само по себе, при возникновении фантазий, мыслей о сексе, эротических снов. А ответное - это отклик на сексуальные и эротические действия со стороны партнера. Так вот в целом людям свойственен и тот, и другой тип в зависимости от контекста. Но у многих людей может преобладать какой-то один тип сексуального влечения. И это нормально, главное уметь донести это партнеру и найти комфортные для обоих сексуальные сценарии.
Что касается того, что мужчины всегда хотят секса. Это миф, который распространён в патриархальном обществе. Такая установка - это один из стандартов гегемонной маскулинности (господство которой вредит как мужчинам, так и женщинам). На деле же, далеко не все мужчины обладают высоким сексуальным темпераментом, не у всех преобладает спонтанный тип влечения. Мужчина может иногда не желать секса, или хотеть секса редко, или вообще не хотеть им заниматься и идентифицировать себя асексуалом. И это не делает его ненормальным или ненастоящим мужчиной.