QueryDSL 하이버네이트6.1.5 이후 버전의 transform문제

[parksey]

문제 상황

querydsl을 사용하던 중, DTO로 바로 매핑하여 데이터를 받기 위해 변환을 하는 도중 groupBy를 사용하게 되면 그룹화를 합니다.
이렇게 되면 group별로 분류된 리스트가 나오게 됩니다.

Member와 Badge는 일대다 관계이지만, 연관관계 매핑은 되어있지 않습니다.
이때 memberId로 grouping을 하게 되면 Badge의 값이 문제가 되는데,
이를 위해 Badge까지 같이 그룹을 하면, 각 리스트에는 하나의 Badge만 들어갈 수 있게 됩니다.

하지만 원하는 데이터는 하나의 ID에 여러 Badge이기 때문에, 쿼리에서의 groupby는 사용하지 않고,
데이터를 가져오면 그 데이터를 java에서 그룹핑하여 데이터를 변환하는 것으로 진행하기 위해

public List<MemberInfoSearchResponse> findMemberAndBadges(Long searchId, boolean isMe) {
		List<Expression<?>> selectExpression = new ArrayList<>(List.of(
			member.nickname,
			member.profileImage,
			member.intro,
			member.totalCertifyCount,
			set(badge.type)));

		if (isMe) {
			selectExpression.addAll(List.of(
				member.bug.goldenBug,
				member.bug.morningBug,
				member.bug.nightBug));
		}

		return jpaQueryFactory
			.from(member)
			.leftJoin(badge).on(member.id.eq(badge.memberId))
			.where(
				DynamicQuery.generateIsNull(true, member.deletedAt),
				member.id.eq(searchId)
			)
			.transform(GroupBy.groupBy(member.id).list(Projections.constructor(MemberInfoSearchResponse.class,
				selectExpression.toArray(new Expression<?>[0])
			)));
	}

이렇게 진행했습니다.

따라서 transform을 사용하게 되었는데,
queryDsl에서 transform을 사용하다 보니
java.lang.NoSuchMethodError: 'java.lang.Object org.hibernate.ScrollableResults.get(int)와 같은 에러가 발생을 하였습니다.

원인

하이버네이트6.1.5로 넘어오면서 해당 메서드가 삭제되어서 생기는 문제입니다.
Querydsl issue 링크

해결

@Bean
public JPAQueryFactory jpaQueryFactory() {
	// return new JPAQueryFactory(entityManager);
	return new JPAQueryFactory(JPQLTemplates.DEFAULT, entityManager);
}

위와 같이 Template을 DEFAULT로 사용하면서 문제를 해결했습니다.

다만, 이렇게 사용하면 AbstractJpaQurey의 stream을 사용할 수 없다는 점이 있는데, 아직 사용하지 않고 있고, 사용하더라도 위 링크에 해당 문제에 대해서도 다루고 있어서 문제는 없을 거 같습니다.

[Shin-Jae-Yoon]

안녕하세요 세연님 ! 저도 이 부분에 대해서 잘 몰랐던 부분이라 조금 찾아봤는데,
결과적으로 저의 의견은 애플리케이션 단에서 stream을 이용하고 querydsl의 grouping은 지양하자 입니다.

영한님의 답변이 유사해보이는데요, transform + groupby 조합은 결국 memory에서 작업하는 것이기에 메모리 사용량이 증가할 수 있다는 문제가 있는 것 같습니다.

[parksey]

좀 찾아봤는데 생각보다 많은 문제가 있었습니다.

1. querydsl의 count
   groupby등 쿼리가 복잡해지면 해당 쿼리 자체에서 예외가 뜨는 문제가 있다고 합니다.
   이러한 문제가 기존 스크롤기능을 제공하면서 이슈가 발생했던 문제였고, 이 문제를 해결하기 위해 관련 기능이 deprecated됐습니다.
   그런데 transform에서 scrollableResult를 사용하는데 이 메서드 또한 Scroll과 관련된 기능이었다 보니 같이 deprecated된 거 같네요.
   그리고 count자체도 성능에 문제가 있을 거 같습니다.

2. connection leak현상
   querydsl에서 transform()메서드는 쿼리 결과를 grouping해서 map을 변환해주게 됩니다. 이렇게 query가 종료되게 되면,
   QueryDsl이 life주기를 관리할 때 queryTerminatingMethod에 등록되어 있는 메서드가 호출이 되면 같이 entityManager를 닫게 해주는데 문제는 transform메서드는 포함되어 있지 않아 커넥션을 못 닫는 문제가 있습니다. 따라서 수동으로 Connection을 닫아줘야하는 문제가 있었습니다.

잘 알지 못하고 사용했는데, 생각보다 문제가 많았네요! 예리한 질문 감사합니다 👍

[Shin-Jae-Yoon]

오 connection leak 현상도 발생하는군요 ! 상세한 답변 감사합니다. 많이 배워감니더 🐥