ローカルAI、RAG、クラウドAI。中小企業はどれを選ぶ
ホーム Askiveデイリー

Askiveデイリー #14 ・ 2026-05-23

ローカルAI、RAG、クラウドAI。中小企業はどれを選ぶ

「AIで何かやれ」と社長に言われ、調べ始めたら「ローカルAI」「RAG」「クラウドAI」と3つの言葉が並んで戸惑う担当者は多い。本記事では、この3つの違いを月額費用と用途で整理し、自社が今どれを選ぶべきか(あるいは選ばなくていいか)を判断できる材料を提示する。結論を先に言えば、社員50人規模で月IT予算3万円なら、まず

「AIで何かやれ」と社長に言われ、調べ始めたら「ローカルAI」「RAG」「クラウドAI」と3つの言葉が並んで戸惑う担当者は多い。本記事では、この3つの違いを月額費用と用途で整理し、自社が今どれを選ぶべきか(あるいは選ばなくていいか)を判断できる材料を提示する。結論を先に言えば、社員50人規模で月IT予算3万円なら、まずクラウドAIの個別契約で十分なケースが大半である。

3つの違い、用途で分かれる

ローカルAI・RAG・クラウドAIは「どこで処理するか」と「何のデータを参照するか」で区別される技術である。混同したまま導入検討を進めると、不要な高額システムを買わされるリスクがある。

クラウドAI(ChatGPT、Claude、Gemini等)は、提供企業のサーバー上で動くAIを月額契約で使う方式。月$20(約3,000円)から個人単位で契約でき、汎用的な文章作成・要約・翻訳に強い。社員データは外部に送信されるため、機密文書の取り扱いには別途設定が必要となる。

RAG(Retrieval-Augmented Generation、検索拡張生成)は、自社の社内文書をAIに参照させる仕組みである。クラウドAIに「自社マニュアル」「過去の議事録」を読み込ませて回答精度を上げる用途で使う。社内ナレッジ検索やFAQ自動応答に向く。

ローカルAI(オンプレミスAI)は、自社サーバーまたはPC上でAIを動かす方式。データが外部に出ない一方、初期費用が数百万円〜数千万円かかる。医療・金融・防衛など、データを社外に出せない業種で採用される。

クラウドAI、最初の選択肢

社員30〜200人規模で、機密度の高くない業務(メール下書き、議事録要約、企画書作成)が中心なら、クラウドAIの個別契約が現実的な出発点となる。

Microsoft 365 Copilotは1ユーザー月$30(約4,500円、公式料金ページ、2026-05確認)。ChatGPT Teamは1ユーザー月$25(約3,750円、OpenAI公式、2026-05確認)。Claude Teamは1ユーザー月$30(約4,500円、Anthropic公式、2026-05確認)。

50人全員に配布すると月15万円前後となるが、最初から全社展開する必要はない。マーケ・営業・総務の5名から試験運用を始めれば月1.5万円で済む。Microsoftが2026年5月に公表した導入企業事例集では、Copilot導入企業の多くがまず20名以下のパイロット運用から開始している。

中小企業にとっての意味は明確だ。月3万円(中堅社員の残業代1日分に相当)の予算枠なら、クラウドAIを5〜8名に配布する形でほぼ完結する。RAGやローカルAIを最初から検討する必要はない。

RAG、社内文書が溜まってから

RAGの導入を検討すべきは、クラウドAIを半年以上運用し「社内文書を参照させたい」という具体的な要望が現場から出てから、というのが現実的な順序となる。

RAGの構築には、社内文書のデータベース化(ベクトルDB構築)、AI接続のためのAPI開発、運用保守の3つの工程が必要だ。外部委託する場合、初期構築費100万〜500万円、月額運用費5万〜20万円が相場である。

Stanford大学AI Index 2026によれば、米中のAIモデル性能差は2.7%まで縮小しており、汎用LLMの基礎性能はほぼ頭打ちに近い。差別化要素は「自社データをどう接続するか」に移っている。RAGはその接続技術の一つだが、接続すべきデータが整理されていなければ機能しない。

中小企業の現実として、社内文書が紙・PDF・Excel・古いWordファイルに散在している状態でRAGを組んでも、回答精度は上がらない。先に文書の電子化と分類を進めるほうが投資対効果は高い。

ローカルAI、限定的な用途

ローカルAIの導入が合理的な中小企業は、現時点では極めて限定的である。情報を社外に1ビットも出せない業種か、ネットワーク不通環境で稼働する必要がある現場に限られる。

ローカルAI実行用のサーバーは、業務利用に耐える性能なら初期費用300万〜1,000万円、電気代と保守で年間50万〜150万円が目安となる。汎用AIモデル(LLaMA、Mistral等)の性能は、同時点のクラウドAIに対して半年〜1年遅れの水準にある。

経済産業省が2026年に公表した「DX白書2026」では、中小企業のAI導入形態の9割以上がクラウドAIまたはSaaS型であり、オンプレミス型ローカルAIの導入は1%未満にとどまる。コストと運用負荷が見合わないためだ。

ローカルAIが選択肢に入るのは、医療法人・金融機関・自治体関連業務・防衛関連サプライヤーなど、データの外部送信が法令または契約で禁じられている場合に限る。一般的な製造業・サービス業の中小企業では、検討対象から外して問題ない。

合わない企業像

1つ目は、社員数30人未満で、業務がほぼ定型化されていない企業。AIに任せる業務が安定して発生しないため、月額契約の固定費が負担になる。個人利用のChatGPT Plus(月$20)で当面足りる。

2つ目は、社内文書が紙とExcelで散在しており、文書管理ルールがない企業。RAGを導入しても参照元データが整っていないため、回答精度が出ない。先に文書整理を進めるほうが先決となる。

3つ目は、社長や決裁者が「AIで何かやれ」とだけ言い、具体的な業務課題を提示しない企業。導入目的が曖昧なまま契約しても、3か月で誰も使わなくなる事例が多い。先に課題ヒアリングを行うべきだ。

よくある質問

取材時に経営者から実際に聞かれた質問を3点抜粋する。

RAGとクラウドAIは併用できるか

併用が前提となる。RAGはクラウドAI(ChatGPT、Claude等)の上に社内文書参照機能を乗せる仕組みで、単体では動かない。月額のAI契約費に加えてRAG構築費が積み上がる構造となる。社員50人規模なら、まずクラウドAIを半年運用し、現場から「自社マニュアル参照」の要望が出た段階で検討するのが現実的だ。

ローカルAIの精度はクラウドAIに追いつくか

汎用性能では半年〜1年遅れが続く見通しだ。Stanford AI Index 2026では米中の最先端モデル性能差が2.7%まで縮小したが、これはクラウド上のフラッグシップ同士の比較である。オープンソースで配布されるローカル実行可能モデルは、計算資源の制約から最先端より1段下の水準にとどまる。データを外に出せない要件がない限り、クラウドAIを選ぶほうが性能面で有利となる。

月3万円の予算で何ができるか

クラウドAIを5〜8名に配布する形で実用域に入る。ChatGPT Team・Claude Team・Microsoft 365 Copilotのいずれも1人月3,750〜4,500円のため、月3万円で6〜8名が利用可能となる。マーケ・営業・総務の主要メンバーに配布し、3か月後に利用ログと業務時間短縮を測定して全社展開の是非を判断するのが標準的な流れだ。

明日の一手

ChatGPT TeamまたはClaude Teamの公式サイトを開き、月額料金と最小契約人数(多くは1〜5名から)を確認する。社内で3か月の試験運用に参加するメンバーを2〜3名選定し、上司に「月1〜2万円・3か月・対象業務2つ」の形で稟議を出す。RAGとローカルAIの検討はこの試験運用の結果を見てからで遅くない。

論点

2026年5月時点で、社員30〜200人規模の中小企業がAI導入で最初に選ぶべきはクラウドAIの小規模契約である。月3万円の予算枠なら6〜8名に配布可能で、RAGとローカルAIは半年〜1年先の検討事項となる。経済産業省「DX白書2026」が示すように中小企業のAI導入の9割以上はクラウド型であり、流れに逆らう必要はない。

本記事はAI編集を経たのち、編集長が事実確認と品質チェックを実施しています。