MAC × AI 実用テスト

サイトの修正を、AIに任せられる?

リンク1か所の修正に成功。

練習用サイトで、リンク先のファイル名をAIに直してもらいました。修正と作業報告の検査はすべて通過しています。

用途全体は検証中練習用サイトの1課題・1回の結果です。サイト開発全体を任せられるかは、まだ検証中です。

21 / 21検査項目を通過
5.34秒AIの処理時間
0回人の手直し
Qwen3.8 27B (Q4_K_M)

Mac Studio · M5 Ultra · 96GB
2026-11-17 · 1課題・1回

04 / WHAT WE KNOW

どこまで分かった?

今回できたこと

  • 指定したリンク1か所を直す
  • ほかの3ファイルを変えずに残す
  • 人の手直しなしで検査を通る

まだ分からないこと

  • 実際の公開サイトでの修正
  • 複雑な機能追加や継続的な運営
  • 必要なメモリ量・他モデルとの優劣

ピークメモリは未測定です。96GBはテストに使ったMacの容量で、必要量の測定値ではありません。

02 / BEFORE & AFTER

何を直した?

「Mac の設定」を押したときの行き先を、正しいファイルへつなぎ直す課題です。

修正前
導入の手順setup-mac.html

行き先が見つからない

修正後
導入の手順mac-setup.html

正しいページへつながる

実際の画面ではなく、保存済みの修正内容を図解しています。
1変更したリンク
3そのまま残したファイル
0修正後のリンク切れ

03 / CHECK RESULTS

結果を、数字で見る

AIの「直しました」という返事だけでなく、保存されたファイルと作業報告を別のプログラムで検査しました。

修正内容・他のファイルの確認7 / 7 通過
作業報告と実際の変更の照合14 / 14 通過
1マス=検査1項目。21回の作業や、21社のサイトを試したという意味ではありません。

サイト開発・運営

機能追加・バグ修正・運営点検を、リポジトリとテストを使って検証します。

選び方の目安

用途別おすすめモデル

まず試すモデル

Qwen3-Coder-30B-A3B-Instruct

4bit / Q4_K_M

最低メモリの目安
32 GB

短い作業を1つずつ試す場合の目安

30Bの4bit重みは理論上約15GB。形式の付加分・会話の記憶・OS用の余裕を加えた目安。32GBで短い作業を1つずつ試す目安です。

試せる作業

HTML/CSSの部品、フォームのたたき台、小さなバグ修正、テストの下書き。ファイルと変更範囲を指定して依頼します。

任せきりにしないこと

サイト全体の設計、認証・決済、複数ファイルをまたぐ自律変更はレビューが必要。モデル単体はファイル編集やブラウザ確認を行わず、対応エディタやエージェントとの接続が必要です。

使い方・条件

使い始める条件 · 目安の根拠

メモリは最低動作保証ではなく、OS・アプリの余裕を含めた編集上の目安です。文章モデルは4bit、入力4K〜8Kトークン、1モデルずつの利用を想定。長い資料・画像入力・複数アプリの同時利用では増えます。A3Bは動く部分の大きさで、モデル全体が3GBに収まる意味ではありません。

Apple SiliconのMacを想定。文章は対応するLM Studio等、音声はWhisper対応アプリ、画像・動画は各モデルに対応したアプリが必要です。RAM容量だけでは速度は決まりません。まず手持ちのMacで短い入力を試してください。

利用者評価の概要

評価されている点

範囲のはっきりしたコード生成やひな型作りが評価されています。

つまずきやすい点

設計判断、長いエージェント作業、意図しないファイル変更への不満もあります。設定・連携ツールで評価が分かれます。

公開された議論を質的に要約しています。全利用者の総意や満足度調査ではありません。PCやクラウドでの報告も含むため、Macでの速度や必要メモリの根拠にはしていません。個人名・体験談の転載は行っていません。

この図解が扱う実測: 2026-11-17 · linkfix-nested-002

詳しい条件・過去の記録を開くモデルの設定、検査結果の全文、過去の成功・失敗を確認できます。

検証候補

保留・再検証中 失敗記録を保持・1ケース通過、用途全体は未確認 · 更新日

2026-11-17、Mac Studio(M5 Ultra・96GB)で Qwen3.8 27B(Q4_K_M)に、練習用サイトの壊れたリンクを1か所直す課題を1回解かせました。採点の21項目すべてに合格し、所要時間は約5秒、人の手直しはありませんでした。試したのはこの1つの課題だけで、ほかの課題やモデルとの比較、使ったメモリの量はまだ測っていません。

Qwen3-Coder 30B · Qwen3.8 27B · Gemma 4 · gpt-oss · Hermes Agent · goose

比較する課題と評価項目

同じ修正依頼で、テスト合格、不要な変更、所要時間、人の手直しを記録します。モデルとエージェントの違いは分けて比較します。

分かっていることと未確認の点

エージェントの比較と練習問題は公開済みです。サイト修正の品質・時間・手直しは別の検証課題です。

自分のMacで試す前に

保留・再検証中

2026-11-14にMac Studio 2でQwen3.8 27B(Q4_K_M、digest aaee06c39dcf2437cde036998d960e1fc1494b8191be7cc9657d01e509097813)を固定ケースlinkfix-typo-001で第4巡として1回実測。queue 20261114T184141-mac-llm-bench-dc22、推論4.807秒(キュー5.6秒)で合成サイトの誤リンク1件(/guid.htmlから/guide.html)を修正し、保存後workspaceの独立採点22項目すべて合格(status: passed、手直し0)。実サイトの変更ではありません。ピークメモリは未計装のため未測定(null)。1ケースだけで用途全体の性能合格とはしません。前回11/9のStudio 1合格(8.514秒)、11/8のStudio 1合格(8.517秒)、11/6の失敗(MiniCPM5-2B、5.206秒・9/17)は別試行として保持し、用途状態は保留(held)を維持。条件: temperature 0、seed 42、num_ctx 8192、num_predict 4096。入力SHA-256 22930c6d8b7dc704db8e1e3c34aba571a80cf39ac86444e66c662b0b6a42df2d。実行ID 20261114T184141-mac-llm-bench-dc22。次は別課題・別モデルの実測、複数ケース比較、ピークメモリ計測です。

第5巡の実測(1ケース通過・用途全体は保留)

Run: 20261117T042150-mac-llm-bench-a069 · Input SHA-256: 6fc4f605433462379b23e167e5865cb00a4e94e6cbe4eb122dbee952b851540d

Mac Studio 2 · qwen3.8:27b Q4_K_M · Ollama 0.40.16 · digest aaee06c39dcf2437cde036998d960e1fc1494b8191be7cc9657d01e509097813 · temperature 0, seed 42, num_ctx 8192, num_predict 4096

2026-11-17にMac Studio 2で固定ケースlinkfix-nested-002を1回実測。qwen3.8:27b Q4_K_M(Ollama 0.40.16、digest aaee06c39dcf2437cde036998d960e1fc1494b8191be7cc9657d01e509097813)。推論5.33705秒、mini-queue全体6.3秒。合成サイトの相対リンク1か所(setup-mac.html → mac-setup.html)を直し、独立checker 21項目すべてtrue、未解決リンク0、他3ファイル不変、手直し0。実サイトの変更ではありません。ピークメモリは未計装のため未測定(null)。入力SHA-256: 6fc4f605433462379b23e167e5865cb00a4e94e6cbe4eb122dbee952b851540d。用途全体の合格や性能推奨を示しません。

用途状態は保留(held)のままです。次巡では別課題または別モデルを測り、複数ケースの比較とピークメモリ計測を補います。