AI要約
Unslothが27BパラメータのQwen3.8-27Bの量子化モデルを公開し、12GBメモリで動作可能にした
- •Dynamic v3.1という新たな量子化手法を用いたモデルが公開された
- •Hugging Face上でApache License 2.0に基づきGGUF形式で無償配布されている
- •Unsloth Desktopアプリ、llama.cpp、Ollamaなどの環境で実行できる
#LLM/モデル動向#半導体・インフラ#生成AI活用・ツール
LlamaやGemmaなどのオープンな大規模言語モデル(LLM)をローカル環境で手軽に実行・管理できるツール。
Unslothが27BパラメータのQwen3.8-27Bの量子化モデルを公開し、12GBメモリで動作可能にした
Offline survival assistant – local LLM and Kiwix, runs from a USB stick
Windows、Linux、macOSに対応した100%オフラインの生存アシスタントで、llama.cppやOllamaによるローカルAIとKiwixライブラリを活用している
GitHub Copilot CLIがローカル環境で動作するOllamaのモデルを/modelコマンドで検出可能になった
Notes on gotchas while migrating 35kb preprompts from Opus to self-hosted Ollama
AnthropicのOpusから自己ホスティング環境のOllamaへ大規模なプリプロンプトを移行する際の技術的な落とし穴や注意点について解説している。