쿼리 추가 발생 문제 해결 #798

ay-eonii · 2024-11-21T15:13:46Z

PR의 목적이 무엇인가요?

목록 조회 시 목록 수 만큼 쿼리가 추가로 발생하는 문제를 해결했습니다.

이슈 ID는 무엇인가요?

모임마다 참여인원과 찜 여부 조회하는 쿼리 발생 문제 해결 #797

설명

모임 목록 조회 API에서 목록 수(N)에 따라 추가적으로 N개의 쿼리를 발생시킵니다.

이를 IN 연산자를 사용해 한번에 조회하도록 변경하고
implements 레이어에서 동일한 moimId로 매핑하도록 변경했습니다.
MoimFinder의 createMoimOverview

  private List<MoimOverview> createMoimOverview(List<Moim> moims, List<ChamyoMoim> chamyoMoims,
  	Set<Long> zzimedMoimIds) {
  	Map<Long, Long> chamyoMap = chamyoMoims.stream()
  		.collect(Collectors.toMap(ChamyoMoim::getMoimId, ChamyoMoim::getChamyoCount));

  	return moims.stream()
  		.map(moim -> new MoimOverview(
  			moim,
  			chamyoMap.getOrDefault(moim.getId(), 0L),
  			zzimedMoimIds.contains(moim.getId())
  		))
  		.toList();
  }

@ManyToOne의 default인 EAGER 설정으로 불필요한 쿼리가 발생하는 것을 확인했습니다.
- 찜한 모임 목록 조회에서 DarakbangMember
- 나의 모임 목록 조회에서 DarakbangMember
- zzim과 darakbangMember를 지연로딩으로 변경했습니다.

질문 혹은 공유 사항 (Optional)

목록 조회 쿼리 개선 블로그에 성능 비교를 참고해주세용

Mingyum-Kim

안녕하세요 에이아니 ~
덕분에 모임 목록 조회 API가 엄청 빨라졌네요 👍👍
Very Cool 합니다. 컨플릭트 발생 예상되는 부분이 있어서 RC 남겨요 같이 합쳐봐요 😋

Mingyum-Kim · 2024-11-22T01:36:19Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		List<Moim> moims = moimRepository.findAllByDarakbangIdOrderByIdDesc(darakbangId);
+		List<ChamyoMoim> chamyoMoims = chamyoRepository.findAllByMoims(moims);
+		Set<Long> zzimedMoimIds = zzimRepository.findAllByDarakbangMemberId(darakbangMember.getId());
+
+		return createMoimOverview(moims, chamyoMoims, zzimedMoimIds);


이 부분은 제가 기존에 해결한 부분이 있어서 (머지는 안됨) 컨플릭트가 발생할 것 같은데요 🤔🤔
어떻게 합칠 지 이야기해봐요!

맞아용 ...ㅠㅅㅠ 이 부분은 할까말까 하다가 찜한모임목록, 나의모임목록 조회 시 동일한 메서드(findAll..., createMoimOverview)를 쓸 수 있길래 일단 수정한 상태입니닷

안나가 해결한 방식과 거의 동일해서 안나거 먼저 머지하고 충돌해결해도 괜찮을 거 같은데 어떠신가여 ?

Mingyum-Kim · 2024-11-22T01:39:58Z

backend/src/main/java/mouda/backend/moim/domain/Moim.java

@@ -25,6 +26,7 @@
 @Table(name = "moim")
 @Getter
 @NoArgsConstructor
+@EqualsAndHashCode


요건 id를 기준으로 동등성 비교를 하나요?
아님 모든 값으로 동등성 비교하나요?

모든 값으로 비교합니당 제외하고 싶은 필드나 지정하고 싶은 필드가 있으면 exclude, of 에 설정하면 됩니닷

pricelees

재택 기간인데 고생이 많으시네요 !
비록 캠퍼스에 나가진 못하고있지만..ㅎㅎ 먼 곳에서 항상 응원하고 있습니닷
고생하셨어요 ~~ (Approve 준다고는 안했습니다 ~)

pricelees · 2024-11-22T11:25:34Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		List<Moim> moims = moimRepository.findAllByDarakbangIdOrderByIdDesc(darakbangId);
+		List<ChamyoMoim> chamyoMoims = chamyoRepository.findAllByMoims(moims);
+		Set<Long> zzimedMoimIds = zzimRepository.findAllByDarakbangMemberId(darakbangMember.getId());


이게 노션에 남겨주신 방법 1인 것 같네요 ~ 개인적으로는 모임이 '찜'을 아는게 크게 문제가 되는 일인가 싶고, 이 과정에서 메서드 흐름이 더 복잡하게 느껴지는 것 같은데요 ! 저는 join을 쓰는 2번이 더 좋은 방법 같습니닷

흑흑 하지만 이건 재사용할 수 있어요 흑흑

흑흑 하지만 이건 재사용할 수 있어요 흑흑

이미 답이 정해졌구나.. ㅋㅋㅋㅋㅋㅋ😡😡

ㅋㅋㅋㅋㅋㅋ 더 열심히 설득하면 반영할 의향 있어요 😋

pricelees · 2024-11-22T11:25:40Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		Set<Long> moimIds = chamyoMoims.stream()
+			.map(ChamyoMoim::getMoimId)
+			.collect(Collectors.toSet());


🤔 내 모임을 조회할 때도 순서대로 정렬하는게 있었던 것 같은데요 ~! Set으로 했을 때 순서가 보장이 될까요?

여기는 순서 보장이 필요없어서 Set으로 했습니당! response는 아래에 List 순서에 따라 매핑합니닷!

pricelees · 2024-11-22T11:25:55Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		Map<Long, Long> chamyoMap = chamyoMoims.stream()
+			.collect(Collectors.toMap(ChamyoMoim::getMoimId, ChamyoMoim::getChamyoCount));


바로 아래에서는 '현재 참여중인 인원'을 currentPeople로 표현했는데 여기서는 chamyoCount로 표현하고 있네요 ~ ㅎㅎ 둘중 하나로 통일하면 좋겠습니다.

헤헤 넹 !!

pricelees · 2024-11-22T11:25:55Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		return moims.stream()
+			.map(moim -> new MoimOverview(
+				moim,
+				chamyoMap.getOrDefault(moim.getId(), 0L),


여기까지의 흐름을 보면,

찜으로 모임을 조회

모임으로 참여를 조회(List -> List

의 흐름인데, 그러면 여기서의 moim에 대한 chamyoMap의 count는 반드시 존재해야 하는 값인 것 같아요 ~ 이게 없으면 0으로 넣을게 아니라 오류가 나는게 조금 더 타당한 것 같습니다.

어랍쇼 ?? 그렇네요 !! 왜 저는 그 생각을 못했을까요 ㅋㅋ 감사합니다!!

그런데 목록이다 보니 하나 오류났다고 전체 조회를 못하는 건 곤란할 거 같아요. 참여인원이 없다면 제외하고 예외는 던지지 않도록 하겠습니다!

어랍쇼 ?? 그렇네요 !! 왜 저는 그 생각을 못했을까요 ㅋㅋ 감사합니다!!

그런데 목록이다 보니 하나 오류났다고 전체 조회를 못하는 건 곤란할 거 같아요. 참여인원이 없다면 제외하고 예외는 던지지 않도록 하겠습니다!

좋은 방법이네요~~ 😄

pricelees · 2024-11-22T11:26:01Z

backend/src/main/java/mouda/backend/moim/infrastructure/ChamyoRepository.java

+		GROUP BY c.moim
+		ORDER BY c.moim.id DESC
+		""")
+	List<ChamyoMoim> findAllByDarakbangMemberId(long darakbangMemberId);


ChamyoMoim을 보면 dto 패키지에 정의했던데, 레포에서 DTO를 꺼내는건 기존 컨벤션과 어긋나지 않나요? 🙃

음 이 dto는 insfrastructure <-> service 범위에서 사용되길래 괜찮지 않을까 했습니다 🤔 그런데 상돌말도 일리가 있네요
중복코드를 제거하고 불필요한 쿼리를 줄이다가 여기서 moimId와 currentPeople을 담은 클래스를 반환해야 가장 깔끔해서 해당 방법을 선택했어요 . 다른 방법은 잘 .. 모르겠네요 ㅠ

혹시 domain 패키지에 ChamyoMoim을 넣으면 좀 컨벤션이 맞춰질까요 ?ㅎ

음 이 dto는 insfrastructure <-> service 범위에서 사용되길래 괜찮지 않을까 했습니다 🤔 그런데 상돌말도 일리가 있네요 중복코드를 제거하고 불필요한 쿼리를 줄이다가 여기서 moimId와 currentPeople을 담은 클래스를 반환해야 가장 깔끔해서 해당 방법을 선택했어요 . 다른 방법은 잘 .. 모르겠네요 ㅠ

혹시 domain 패키지에 ChamyoMoim을 넣으면 좀 컨벤션이 맞춰질까요 ?ㅎ

기존 코드를 보면 레이어와 상관없이 DTO를 반환하는게 없었어서요~ 한번 고민해 보시죠!

ㅎㅎ 일단 눈속임으로 domain에 넣었어요 ^^,,

pricelees · 2024-11-22T11:26:04Z

backend/src/main/java/mouda/backend/moim/infrastructure/ZzimRepository.java

+
+	@Query("""		
+		SELECT
+			z.moim.id
+		FROM Zzim z
+		WHERE z.darakbangMember.id = :darakbangMemberId
+		ORDER BY z.id DESC
+		""")
+	Set<Long> findAllByDarakbangMemberId(long darakbangMemberId);


이건 헷갈릴 수 있는 여지가 있겠는데요 ~ ZzimRepository에서의 findAl이면 일반적으로는 Collection을 기대할 것 같아요 !

나이스 눈썰미 👀

pricelees · 2024-11-22T11:26:08Z

backend/src/main/java/mouda/backend/moim/infrastructure/dto/ChamyoMoim.java

+@Getter
+@EqualsAndHashCode
+@AllArgsConstructor
+public class ChamyoMoim {


이름이 안이뻐요 ㅋㅋ😛

pricelees

어푸~

pricelees · 2024-11-22T13:14:10Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		List<Moim> moims = moimRepository.findAllByDarakbangIdOrderByIdDesc(darakbangId);
+		List<ChamyoMoim> chamyoMoims = chamyoRepository.findAllByMoims(moims);
+		Set<Long> zzimedMoimIds = zzimRepository.findAllByDarakbangMemberId(darakbangMember.getId());


흑흑 하지만 이건 재사용할 수 있어요 흑흑

이미 답이 정해졌구나.. ㅋㅋㅋㅋㅋㅋ😡😡

pricelees · 2024-11-22T13:14:48Z

backend/src/main/java/mouda/backend/moim/implement/finder/MoimFinder.java

+		return moims.stream()
+			.map(moim -> new MoimOverview(
+				moim,
+				chamyoMap.getOrDefault(moim.getId(), 0L),


어랍쇼 ?? 그렇네요 !! 왜 저는 그 생각을 못했을까요 ㅋㅋ 감사합니다!!

그런데 목록이다 보니 하나 오류났다고 전체 조회를 못하는 건 곤란할 거 같아요. 참여인원이 없다면 제외하고 예외는 던지지 않도록 하겠습니다!

좋은 방법이네요~~ 😄

pricelees · 2024-11-22T13:15:26Z

backend/src/main/java/mouda/backend/moim/infrastructure/ChamyoRepository.java

+		GROUP BY c.moim
+		ORDER BY c.moim.id DESC
+		""")
+	List<ChamyoMoim> findAllByDarakbangMemberId(long darakbangMemberId);


음 이 dto는 insfrastructure <-> service 범위에서 사용되길래 괜찮지 않을까 했습니다 🤔 그런데 상돌말도 일리가 있네요 중복코드를 제거하고 불필요한 쿼리를 줄이다가 여기서 moimId와 currentPeople을 담은 클래스를 반환해야 가장 깔끔해서 해당 방법을 선택했어요 . 다른 방법은 잘 .. 모르겠네요 ㅠ

혹시 domain 패키지에 ChamyoMoim을 넣으면 좀 컨벤션이 맞춰질까요 ?ㅎ

기존 코드를 보면 레이어와 상관없이 DTO를 반환하는게 없었어서요~ 한번 고민해 보시죠!

Mingyum-Kim

멋지다 김테니 ~

ay-eonii added 3 commits November 21, 2024 22:24

refactor: 모임마다 조회하던 참여자수, 찜을 한 번에 조회하도록 변경

49e2eba

fix: 찜 연관관계 지연로딩으로 변경

3d0e89c

refactor: 다락방멤버 한번에 조회하도록 수정

e2bdd42

ay-eonii requested review from Mingyum-Kim, ksk0605, hoyeonyy and pricelees November 21, 2024 15:13

fix: 오타 수정

ac178f5

ay-eonii changed the title ~~Refactor/#797~~ 쿼리 추가 발생 문제 해결 Nov 21, 2024

Mingyum-Kim requested changes Nov 22, 2024

View reviewed changes

fix: 불필요한 연산 제거

0c6e3ec

pricelees requested changes Nov 22, 2024

View reviewed changes

ay-eonii added 3 commits November 22, 2024 21:26

fix: 클래스명, 필드명 currentPeople 통일하여 변경

023fcf8

fix: 찜한 모임Id 조회 메서드명 변경

d8bdc62

fix: 참여인원 없는 모임 제외

1f50017

pricelees approved these changes Nov 22, 2024

View reviewed changes

fix: 충돌해결

ae7ebf6

Mingyum-Kim approved these changes Nov 25, 2024

View reviewed changes

ay-eonii merged commit e77f98a into develop-backend Nov 25, 2024
1 check passed

ay-eonii deleted the refactor/#797 branch November 25, 2024 06:44

ay-eonii self-assigned this Nov 25, 2024

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

쿼리 추가 발생 문제 해결 #798

쿼리 추가 발생 문제 해결 #798

ay-eonii commented Nov 21, 2024

Mingyum-Kim left a comment

Mingyum-Kim Nov 22, 2024

ay-eonii Nov 22, 2024

Mingyum-Kim Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees left a comment

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees Nov 22, 2024

ay-eonii Nov 22, 2024

pricelees left a comment

pricelees Nov 22, 2024

pricelees Nov 22, 2024

pricelees Nov 22, 2024

Mingyum-Kim left a comment

		Map<Long, Long> chamyoMap = chamyoMoims.stream()
		.collect(Collectors.toMap(ChamyoMoim::getMoimId, ChamyoMoim::getChamyoCount));

쿼리 추가 발생 문제 해결 #798

쿼리 추가 발생 문제 해결 #798

Conversation

ay-eonii commented Nov 21, 2024

PR의 목적이 무엇인가요?

이슈 ID는 무엇인가요?

설명

질문 혹은 공유 사항 (Optional)

Mingyum-Kim left a comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

pricelees left a comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

pricelees left a comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Choose a reason for hiding this comment

Mingyum-Kim left a comment

Choose a reason for hiding this comment