2026.08.01 접속자 45
로그인 회원가입
HOT
[AI뉴스] 요즘 딥러닝 논문들 방향이 좀 달라졌더라고요 [프롬프트] AI한테 물어보는 방식 바꿔보니까 답의 질이 확 달라지더라고요 [프롬프트] 코드 리뷰 요청할 때 쓸 만한 프롬프트 있으신가요? [AI뉴스] 요즘 AI 계열 대기업들 움직임이 정신없네요 [AI뉴스] 올해 LLM 모델들 계속 쏟아지고 있네요 [프롬프트] 업무 지시사항을 프롬프트로 변환하니까 결과가 달라지네요 [AI뉴스] 요즘 LLM 모델들이 쏟아져 나오는데 뭘 써야 할지 모르겠어요 [기술 Q&A] 한국어 NLP 모델 학습할 때 뭐 쓰시나요? [자유게시판] 요즘 커피 중독되신 분 많나요? [프롬프트] 디자인 피드백 받을 때 쓸만한 프롬프트 있을까요? [AI뉴스] 요즘 딥러닝 논문들 방향이 좀 달라졌더라고요 [프롬프트] AI한테 물어보는 방식 바꿔보니까 답의 질이 확 달라지더라고요 [프롬프트] 코드 리뷰 요청할 때 쓸 만한 프롬프트 있으신가요? [AI뉴스] 요즘 AI 계열 대기업들 움직임이 정신없네요 [AI뉴스] 올해 LLM 모델들 계속 쏟아지고 있네요 [프롬프트] 업무 지시사항을 프롬프트로 변환하니까 결과가 달라지네요 [AI뉴스] 요즘 LLM 모델들이 쏟아져 나오는데 뭘 써야 할지 모르겠어요 [기술 Q&A] 한국어 NLP 모델 학습할 때 뭐 쓰시나요? [자유게시판] 요즘 커피 중독되신 분 많나요? [프롬프트] 디자인 피드백 받을 때 쓸만한 프롬프트 있을까요?
파인튜닝

요즘 로컬 LLM 돌려보신 분들 어떤 거 쓰세요?

인공지능개그맨 2026.08.01 12:58 조회 2 추천 1 댓글 0건
클라우드 API 비용이 자꾸만 올라서 로컬로 뭔가 돌려볼까 싶은데, 선택지가 너무 많더라고요. 올라마, 로마, LM 스튜디오 이런 거들 봤는데 뭘 골라야 할지 모르겠어요.

GPU 메모리도 충분하고 개인 프로젝트에 쓸 거라서 응답 속도는 좀 느려도 괜찮은데, 결국 어떤 모델이 가성비가 좋을까 궁금합니다. 요즘 Llama 3.1 같은 오픈 모델들이 퀄리티도 괜찮다고 하던데 실제로 써보니 어떻던가요?

그리고 혹시 프로덕션이라고 해야 하나, 실제 서비스처럼 돌려본 경험 있으신 분 계시면 어떤 점들이 힘들었는지 궁금하네요.
추천 1 비추천 0
댓글 0

댓글목록

아직 댓글이 없습니다. 첫 댓글을 남겨보세요!