'인지 핵심'이 최소한의 사실만 알고 있다면, 맥락에 많은 정보를 포함해야 하며, 각 질문에 대한 원시 문서를 훑어보는 것보다 미리 계산된 사고가 담긴 카트리지를 사용하는 것이 훨씬 더 효율적일 것입니다.
게다가, 이전의 "접두사 튜닝" 논문에서는 KV-접두사가 미세 튜닝과 동일한 효과를 가질 수 있음을 보여주었고, 따라서 카트리지에 스킬, 텍스트 스타일 등도 포함할 수 있습니다. 그리고 LoRA 어댑터와 달리 이들은 구성 가능합니다.
스레드를 불러오는 중
깔끔한 읽기 화면을 위해 X에서 원본 트윗을 가져오고 있어요.
보통 몇 초면 완료되니 잠시만 기다려 주세요.
트윗 2개 · 2025. 10. 30. 오후 5:37
'인지 핵심'이 최소한의 사실만 알고 있다면, 맥락에 많은 정보를 포함해야 하며, 각 질문에 대한 원시 문서를 훑어보는 것보다 미리 계산된 사고가 담긴 카트리지를 사용하는 것이 훨씬 더 효율적일 것입니다.
게다가, 이전의 "접두사 튜닝" 논문에서는 KV-접두사가 미세 튜닝과 동일한 효과를 가질 수 있음을 보여주었고, 따라서 카트리지에 스킬, 텍스트 스타일 등도 포함할 수 있습니다. 그리고 LoRA 어댑터와 달리 이들은 구성 가능합니다.