2026-11-10

1검색과 추천을 SID 생성 모델 하나로 묶었다 — Shopify

• Shop app 홈피드 A/B에서 SID-LLM을 더한 쪽은 영향받은 지면의 주문이 7.95%, 구매 유저가 8.60%, 전환율이 9.85% 올랐다 확인 — 논문 §9.2.2.
  • 세 지표 모두 Dunnett 보정(여러 처리군을 한 대조군과 비교할 때 쓰는 다중 비교 보정) 뒤에도 유의하다고 쓴다.
  • 홈피드 실험에 쓴 것은 결합 확률 디코더(joint-probability decoder)를 쓴 자기회귀 모델이다.
• 추천 경로의 SID-LLM은 기존 후보 생성기를 대체하지 않고, 생성한 SID를 상품 200개로 바꿔 후보 풀에 더한다 확인 — 논문 §8.
  • 오프라인 비교에 쓴 최고 모델은 LFM2-2.6B 기반이다.
• 오프라인에서 SID-LLM은 풀에 있는 다른 후보 생성기보다 기여가 컸다 확인 — 논문 §9.2.1.

  • 지표는 incremental pool recall(그 생성기를 풀에서 뺐을 때 풀 전체 recall이 떨어지는 폭)이다. 구매가 있는 유저 70,747명의 다음 주 구매로 쟀다.

  • 생성기마다 후보 200개를 낸 조건의 값은 다음과 같다.

    후보 생성기	Recall@50 (%)	incremental pool recall (%p)
    SID-LLM (LFM2-2.6B)	24.61	2.65
    최근 상호작용	17.28	1.64
    HSTU	17.21	0.78

"On the impacted surface, adding SID-LLM raised attributed orders by 7.95%, converting users by 8.60% and conversion rate by 9.85%. All three lifts are significant after Dunnett correction" — Generative Search and Recommendation at Shopify (논문), 2026-11-05

• 검색 경로는 여러 토큰을 한 번에 예측하는 multi-token prediction 생성기와 후보 250개를 다시 매기는 가벼운 ranker를 함께 서빙한다 확인 — 논문 §8.
• SID-LLM 단독 검색은 기존 다중 모델 검색 스택 전체와 비슷한 품질을 지연 요구 안에서 냈다고 쓴다 확인 — 논문 초록.
• 결론 절은 검색 스택을 점점 단일 모델로 옮기겠다고 쓰지만, 추천 쪽 대체 계획은 밝히지 않는다 확인 — 논문 §10.

검증에서 뒤집힌 것

• 2026-11-09 daily는 arXiv 응답 30건을 모두 이전에 triage한 묶음이라고 적었지만, 그 안의 Shopify 논문(2611.08804)은 어느 기록에도 없었다. 오늘 수용 기준을 다시 적용해 레이더에 넣었다.

레이더

• Shopify SID-LLM — 검색과 추천을 SID 생성 모델 하나로 — arXiv 2611.08804.
• arXiv cs.IR 응답 30건 가운데 12건이 2026-11-06 새 제출이었다. 통과한 것은 없다.
• r/RedditEng 새 글 One More Nine(Kafka 롤링 재시작 중 가용성, 2026-11-09)은 순수 인프라 글이라 건너뛰었다.

다음에 볼 것