본문 바로가기

🤗허깅페이스(Hugging Face)8

🤗huggingface에서 Recurrent Gemma 2b 사용해보기 1. Recurrent Gamma란?이전시간에 한국어로 파인튜닝한 gemma 2b 버전을 사용했었는데 프롬프트를 넣고 사용해 보니 영 기능이 시원치 않았다. 🤗huggingface의 google 페이지를 들어가니 recurrent gemma가 나왔더라.   구글 홈페이지 들어가서 검색해 보니 아래와 같은 장점이 있더라RecurrentGemma  |  Google for Developers RecurrentGemma  |  Google for Developers생성 및 조정 예시는 Gemma Cookbook 저장소를 확인하세요. 자세히 알아보기 이 페이지는 Cloud Translation API를 통해 번역되었습니다. 의견 보내기 컬렉션을 사용해 정리하기 내 환경설정을 기준으로ai.google.dev  .. 2024. 7. 22.
🤗huggingface LLM 개발을 위한 아나콘다 환경 구성 며칠전에 안 사실인데 🤗bitsandbyte라는 허깅페이스 양자화에 필요한 라이브러리가 0.43 이후부터 윈도우를 공식! 지원한단다! 이거때문에 wsl2 설치하고 우분투 환경 구성한거 생각하면...https://github.com/bitsandbytes-foundation/bitsandbytes/issues/1131=0.43.0 Instead of opening multiple individual issues, please use this issue to give us fee..." data-og-host="github.com" data-og-source-url="https://github.com/bitsandbytes-foundation/bitsandbytes/issues/1131" data-og-u.. 2024. 7. 16.
[목차]🤗 HuggingFace 스터디 학습 순서 정리 🤗 허깅페이스의 각종 라이브러리를 공부하는 순서를 정리해 두었다. 처음에 보시는 분은 아래의 링크 순서대로 따라가 공부해 보자. 🤗 [시작하기] 1. 허깅페이스 트랜스포머 라이브러리란? 2023. 8. 25.
🤗 [시작하기] 1. 허깅페이스 트랜스포머 라이브러리란? 거대 언어 모델(LLM)이 대세가 된 요즘, 이러한 라이브러리를 공부해야 겠다는 생각이 들었다. 인터넷에서 자료를 찾아가면서 공부하는데 항상 🤗트랜스포머 라이브러리가 나오더라고... 안되겠다 싶어 공부하면서 나름 정리한 내용을 블로그로 포스팅 하기로 했다. (참고로 🤗허깅페이스, 🤗트랜스포머, 🤗PEFT 등 🤗허깅페이스와 '라이브러리'와 관련된 이야기는 무조건 이모지 🤗를 붙이는게 관례(?) 라고 한다.) 그냥 번역해서 복사, 붙여넣기 하면 재미없지... 튜토리얼을 공부하면서 내가 생각하고 구상한 모델을 예시로 넣을 것이다. 잘 될진 안될지 모르것다. 지금 생각은 llama 등과 같은 큰 모델 말고 roberta 같은 작은 모델부터 시작하려고 한다. 공부하다가 틈틈히 '자연어 처리를 위한 트랜스포머' 책.. 2023. 8. 25.