프로그램 사용/ai 프로그램
lm studio
구차니
2026. 4. 17. 16:51
맥북에서 lm studio로 openclaw 이런 이야기가 많이 나오길래 검색
ollama 처럼 모델 불러서 쓸 수 있나?
| import lmstudio as lms EXAMPLE_MESSAGES = ( "My hovercraft is full of eels!", "I will not buy this record, it is scratched." ) model = lms.llm() chat = lms.Chat("You are a helpful shopkeeper assisting a foreign traveller") for message in EXAMPLE_MESSAGES: chat.add_user_message(message) print(f"Customer: {message}") response = model.respond(chat) chat.add_assistant_response(response) print(f"Shopkeeper: {response}") |
[링크 : https://pypi.org/project/lmstudio/]
저 모델 명칭은 어디서 얻고, 어디서 다운로드 받는걸까?
-> 허깅스페이스 모델명으로 검색되서 받아오는 듯 gguf 포맷으로
| const model = await client.llm.load("qwen2.5-7b-instruct", { config: { contextLength: 8192, gpu: { ratio: 0.5, }, }, }); |
[링크 : https://lmstudio.ai/docs/typescript/llm-prediction/parameters]
[링크 : https://lmstudio.ai/docs/python]
[링크 : https://lmstudio.ai/]