콘텐츠로 바로가기

아이테크 어른경제

  • 정보

로컬 LLM

  • 로컬 LLM과 이미지 생성을 같은 GPU에서 돌리면 왜 둘 다 느려질까

    로컬 LLM과 이미지 생성을 같은 GPU에서 돌리면 왜 둘 다 느려질까

  • 로컬 LLM에 PDF 넣었더니 느려지는 이유, 모델보다 검색 방식 문제였다

    로컬 LLM에 PDF 넣었더니 느려지는 이유, 모델보다 검색 방식 문제였다

  • 로컬 LLM 컨텍스트 길이를 올리면 VRAM이 왜 갑자기 부족해질까

    로컬 LLM 컨텍스트 길이를 올리면 VRAM이 왜 갑자기 부족해질까

  • Gemma 로컬 LLM으로 블로그 초안 쓰면 깔끔하지만 아쉬운 지점

    Gemma 로컬 LLM으로 블로그 초안 쓰면 깔끔하지만 아쉬운 지점

  • Qwen 로컬 LLM으로 한국어 글을 써보면 좋은 점과 손봐야 할 점

    Qwen 로컬 LLM으로 한국어 글을 써보면 좋은 점과 손봐야 할 점

  • 8GB VRAM에서 로컬 LLM 모델 고를 때 7B만 보면 실패하는 이유

    8GB VRAM에서 로컬 LLM 모델 고를 때 7B만 보면 실패하는 이유

  • RTX 3060 12GB 로컬 LLM, Qwen과 Gemma 체감 차이는 어디서 갈렸나

    RTX 3060 12GB 로컬 LLM, Qwen과 Gemma 체감 차이는 어디서 갈렸나

  • RTX 2060 6GB로 LM Studio 오래 켜두면 VRAM이 먼저 차는 이유

    RTX 2060 6GB로 LM Studio 오래 켜두면 VRAM이 먼저 차는 이유

  • Mistral Small 4, 119B인데 왜 빠를까요?

    Mistral Small 4, 119B인데 왜 빠를까요?

  • Mistral Small 4 직접 써봤습니다 — 세 모델이 하나로

    Mistral Small 4 직접 써봤습니다 — 세 모델이 하나로

다음 페이지→
  • Twitch
  • X
  • Tumblr

댓글 로드중...