Врата вроде серьезное аниме (ну немного юмора для разбавления сюжета не считается) а второе чистая комедия - так что сложно понять что Вас интерсует

олдскул:
Эль-Хазард - комедия про школьников в другом мире
Морская невеста - комедия про парня помолвленном на русалке-якудза @__@
Безответственный капитан Тейлор - отличная комедия про космос (с пришельцами-эльфами)

более свежее:
Великолепный парк Амаги - ГГ становится менеджером парка развлечения где все работники из сказачного мира
Бездарная Луиза - ГГ призывают в другой мир и он становится фамильяром бездарной волшебницы
Иной мир - легенда святых рыцарей - ГГ попадает в другой мир где он самый сильный

серьезные - без комедии:
12 Королевств - ГГ девушка из нашего мира и избрана стать королевой одной из 12 стран в другом мире
Re:Zero, No game no life и Богиня благословляет этот мир - нет смысла описывать

Те, кто охотится на эльфов - танк в мире фэнтези

(второе из твоего примера - это Outbreak Company, если что)