All Posts

Call for Supporters in NLP and LLM research

Đây là lần đầu tiên mình có cơ hội trao đổi nước ngoài với mục đích nghiên cứu. Hãy cùng nghe mình kể về những câu chuyện trong chuyến đi này nhé!

Ở trong bài này, chúng ta cùng thảo luận kĩ hơn về QLoRA và LongLoRA - hai kĩ thuật được phát triển từ LoRA với các mục đích tối ưu hơn cho từng mục đích

LoRA đã trở thành một kĩ thuật fine-tuning được sử dụng rộng rãi với sự tối ưu của nó. Trong series này, chúng ta sẽ thảo luận về LoRA, lượng tử hoá và một phiên bản mở rộng của LoRA với context dài hơn.

LLaMA-2 được tung ra với một paper dài 77 trang mô tả đầy đủ về tất cả kĩ thuật sử dụng và mở cho cả mục đích thương mại.