LLM은 더 이상 "인터넷으로 학습"하지 않는다 파이토치 공식 홈에서 글을 보았다. https://discuss.pytorch.kr/t/gn-llm/4566 [GN⁺] LLM은 더 이상 "인터넷으로 학습"하지 않는다LLM은 더 이상 "인터넷으로 학습"하지 않는다 소개 과거에는 LLM이 주로 인터넷 데이터로 학습되었고, 현재도 대부분 그렇지만, 점점 덜 사실(less true)이 되고 있음 "인터넷 시뮬레이터"라는 개념은discuss.pytorch.kr LLM 학습자들은 최근 "데이터 장벽"에 부딪혔음OpenAI는 이미 웹상의 거의 모든 데이터를 보유하고 있어, 더 나은 LLM을 만들기 위해서는 비공개 데이터 획득 및 생성이 필요함결국 데이터의 양은 확보가 되었고 앞으로는 더욱 더 중요한 것은 데이터의 질이라고 생각한다.어떤 특수한 데이터를 담은 LLM.. Introducing DBRX: A New State-of-the-Art Open LLM 원문 https://www.databricks.com/blog/introducing-dbrx-new-state-art-open-llm?utm_source=pytorchkr Introducing DBRX: A New State-of-the-Art Open LLM | Databricks www.databricks.com 번역 오늘은 Databricks에서 만든 개방형 범용 LLM인 DBRX를 소개하게 되어 기쁘게 생각합니다. 다양한 표준 벤치마크에서 DBRX는 기존 개방형 LLM에 대한 새로운 최첨단 기술을 설정합니다. 또한 이전에는 폐쇄형 모델 API로 제한되었던 기능을 자체 LLM을 구축하는 개방형 커뮤니티와 기업에 제공합니다. 측정에 따르면 GPT-3.5를 능가하며 Gemini 1.0 Pro와 경쟁이 .. 이전 1 다음
