AIの鬼
#新モデル Zenn AI

llama.cppでQwen3.8:27bの思考グルグルをある程度削減

llama.cppでQwen3.8:27bの思考グルグルをある程度削減(内容を表す図ではないイメージ画像)
イメージ

詳細は追記します CUDA_VISIBLE_DEVICES=0,1 ./llama-cli --model ~/unsloth/Qwen3.8-27B-GGUF/Qwen3.8-27B-Q4_0.gguf --temp 1.0 --top-p 0.95 --top-k 20 --min-p 0.0 -ngl 999 --reasoning-effort low --reasoning-effort lowで推論の長さを調整

出典: Zenn AI(配信元の紹介文より引用)
御社でもAIを使ってみませんか
まずはここから 御社でもAIを使ってみませんか? 御社の実際の業務を題材に、AIで何ができるかを一緒に考えます。 「ChatGPTの使い方」を教えるだけの研修ではありません。 AI研修・AI活用相談 →