<LLM> [Qwen] Qwen Technical Report

<LLM> [Qwen] Qwen Technical Report

최근(2023.09)에 나온 논문을 읽어보고 간단히 정리했습니다. 혹시 부족하거나 잘못된 내용이 있다면 댓글 부탁드립니다 ️ usechatgpt init success [Qwen Team, Alibaba Group] 유사한 사이즈 모델 대비 우수한 성능을 보이는 Qwen model series를 공개. Qwen, Qwen-Chat, Code-Qwen, Code-Qwen-Chat, Math-Qwen-Chat 배경 최근 핫하게 떠오르는 Qwen 모델의 technical report가 있어 이를 살펴보고 간단히 정리해보고자 합니다. Qwen은 Qianwen이라는 중국 구절에서 따온 것으로, 'thousands of prompts'라는 의미를 담고 있다고 합니다. 위 모델 series 구성도에서 볼 수 있..

원문링크 : <LLM> [Qwen] Qwen Technical Report

 등록된 다른 글

Multi-class Classification

Multi-class Classification

More examples of what machine learning can and cannot do

More examples of what machine learning can and cannot do

<LK Lab, Alignment> [ALMoST] Aligning Large Language Models through Synthetic Feedback (2023.10)

<LK Lab, Alignment> [ALMoST] Aligning Large Language Models through Synthetic Feedback (2023.10)

Matrices as objects that map one vector onto another; all the types of matrices

Matrices as objects that map one vector onto another; all the types of matrices

4.7. 대각화할 수 없는 경우

4.7. 대각화할 수 없는 경우

10월 3주차 논문 요약: GQA, LLM, LLMLingua, LLeMA, ToRA

10월 3주차 논문 요약: GQA, LLM, LLMLingua, LLeMA, ToRA

Optimization Algorithms(3) - Gradient Descent

Optimization Algorithms(3) - Gradient Descent

<LK Lab, CoT> The CoT Collection: Improving Zero-shot and Few-shot Learning of Language MOdels via Chain-of-Thought Fine-Tuning (2023.10)

<LK Lab, CoT> The CoT Collection: Improving Zero-shot and Few-shot Learning of Language MOdels via Chain-of-Thought Fine-Tuning (2023.10)