ayousanz https://blog.hatena.ne.jp/ayousanz/ yousanのメモ https://ayousanz.hatenadiary.jp/ AI 初めに 環境 準備 コードの作成 推論 結果 tokens = 3の場合 tokens = 100の場合 まとめ 初めに MacでLLMで動くライブラリ「AirLLM」があると聞いたので、実際に試してみます github.com 参考サイト note.com 環境 CPU : M1Max Mac メモリ : 64GB モデル : elyza/ELYZA-japanese-Llama-2-13b-instruct 準備 環境を構築します python3 -m venv air_llm source bin/activate ライブラリをインストールします pip install mlx airl… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fayousanz.hatenadiary.jp%2Fentry%2F2024%2F01%2F02%2F002132" title="MacでAirLLMで動かす - yousanのメモ" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/a/ayousanz/20240102/20240102001251.png Hatena Blog https://hatena.blog 2024-01-02 00:21:32 rich https://ayousanz.hatenadiary.jp/entry/2024/01/02/002132 1.0 100%