GGUF

LLM・言語モデル

1万ドルの失敗? AI向けに128GB M5 Maxをテスト

128GBメモリと40コアGPUを搭載したM5 Max MacBook Proを、ローカルAI用途の観点から徹底検証する。プロンプト処理、トークン生成、量子化、コンテキスト長、GGUFとMLXの違いを整理し、各種モデルや画像生成の実性能を比較。携帯性と大容量メモリの強みを評価する一方、価格性能比やデスクトップ構成との差も検討し、最適な用途と購入すべきユーザー像を明らかにする。
AIエージェント

Ornith 1.0 チュートリアル – Ornith 1.0のインストールと使用方法 (ローカルでのOpusレベルのコーディング)

オープンソースのコーディング特化AIモデルであるOrnithを、LM Studioを用いてローカル環境で動かす方法を解説するチュートリアルである。最先端モデルに匹敵する397B版は要求スペックが高いため、本動画では初心者向けで現実的な9B(90億)パラメータ版を採用する。LM Studioの導入からモデルのダウンロード手順、そして実際にPythonスクリプトやToDoアプリ、トレードの単価計算ツールを作成する実演までを網羅している。小規模モデルゆえにエラーも発生するが、プロンプトでの修正指示を通じてデバッグする過程も紹介する。オフラインでプライバシーを保ちつつ、ジュニアエンジニアのように活用できる点を強調している。
NVIDIA・ジェンスンフアン

Nvidiaの新しいNemotron 3 Nano – エッジ向けの推論LLM!

この動画は、Nvidiaの軽量推論モデル Nemotron 3 Nano を取り上げ、その性能、設計思想、学習レシピ、そしてWebGPU上での実用性を検証する内容である。4Bという比較的小さなモデルでありながら、オンデバイス用途に強く最適化...
AI研究

ローカルAIモデルで何でも構築する方法

本動画は、ローカルコンピュータ上でAIモデルを実行する方法を包括的に解説する技術ガイドである。クラウドベースのAIサービスへの依存から脱却し、プライバシーを保護しながら無料でAIを活用できる「ローカルAI革命」の到来を告げる内容となっている...
LLM・言語モデル

Mistral 3の新モデル4つがリリース!

Mistral AIが5ヶ月ぶりに大規模なモデルリリースを発表した。今回のMistral 3シリーズには、675Bパラメータを持つフラッグシップモデル「Mistral Large 3」と、3B、8B、14Bの3つの小規模な密モデル「Mini...