Claude サブスクリプションを置き換えることができる (場合によってはそれを上回るパフォーマンスを発揮する) 4 つのオープンソース ツール

in tech

クロードに毎月支払うことは、実際に得られるものと手放すものを比較するまでは意味がありました。費用もかさむので、これを目にする人も増えていると思います。同じ認識を持っている場合は、以下のツールを知っておく価値があります。これらは、Claude の主な機能をカバーしており、大きな欠点や削除はありません。

コンピューター上でモデルを直接実行できます

月額料金を下げる最も早い方法です

クロードのサブスクリプションを試してみましたが、私にとっては価値がありませんでした。私が Llama.cpp を使用しているのは、これが自分のマシンで LLM を実行する最も速くて軽い方法だからです。これは、可能な限り無駄を省くために C および C++ で最初から構築された推論エンジンです。単一の移植可能なバイナリにコンパイルされるため、重い依存関係、仮想環境、または PyTorch のようなフレームワークと格闘する必要はありません。

CPU や GPU と直接通信し、邪魔をしません。セットアップが簡単なだけでなく、月額料金やトークンごとの API コストもかからず、データがリモート サーバーにアクセスすることはありません。

クラウドから独自のハードウェアに移行する際の最大の課題はメモリです。実行に使用できる量子化モデルが多数あります。 Llama の実行中に Firefox と Chrome の両方をオンにしていたところ、ファンの動作が激しくなっていることに気づきましたが、PC 全体には大きな影響はありませんでした。したがって、セットアップする意欲があれば、これはクロードの簡単な代替品になります。

作業中はコードを非公開にしておきます

この拡張機能はローカル モデルをエディタに直接接続します

vs code で開発を続ける クレジット: Nick Lewis / How To Geek

Claude や GitHub Copilot などのクラウドベースのコーディング ツールは本当に便利ですが、重大なプライバシー問題が伴います。これらを使用するたびに、ソース コード、アーキテクチャの決定、ビジネス ロジックが他の人のサーバーに送信されます。厳格なコンプライアンス要件があるチームや、知的財産を外部システムから遠ざけることに関心がある人にとって、これは大きな問題です。

Continue.dev は、ローカルでホストされている AI モデルをエディターに直接接続できるようにする、VS Code および JetBrains 用のオープンソース拡張機能です。すべてが独自のハードウェア上で実行されるため、コードがサードパーティのサーバーに接触することはありません。データ転送がないので、コードがどこに行くのかを心配する必要はありません。

Continue.dev には独自のバックエンドが付属していないため、すべてを接続するのは非常に簡単です。そのため、すでに使用しているローカル推論エンジンに接続できます。したがって、Ollama、LM Studio、または llama.cpp サーバーを使用できます。構成は、どのモデルがどのタスクを処理するかを定義する単一のファイルで行われます。

ローカル モデルを残りのアプリに接続する

ビジュアルエディターを使用すると、コードの壁を必要とせずにタスクを自動化できます

Chrome で表示された n8n ワークフロー。 クレジット:

独自のハードウェア上で大規模な言語モデルを実行するのは素晴らしいことですが、AI の有用性は実際に何ができるかによって決まります。幸いなことに、n8n は、ローカル モデルを実行する他のすべてのものに接続するオープンソース ツールです。そのため、LLM は他のアプリと通信し、データを自動的に移動できるようになります。

有料の Claude サブスクリプションのようなものでは、ユーザーはそのプラットフォームに閉じ込められ、外部サービスに接続するだけで追加料金がかかります。 n8n は無料で、ローカル推論サーバーを電子メール、データベース、サードパーティ ツールに直接接続します。これらはすべて、ビジュアルなドラッグ アンド ドロップ エディターを通じて行われるため、相互に通信するためだけに膨大なコードを記述する必要はありません。

n8n の最も優れている点は、発生する非常に具体的な事柄に基づいてワークフローを起動できるように設定できることです。電子メールが AI に届く前にスパムやニュースレターをフィルターで除外することもできるため、ジャンクでコンピューティングを消費することはありません。

ローカル AI をブラウザに直接取り込む

Web ページでチャットしたり、ローカルで Web を検索したりできます

YouTube 動画で使用されている Page Assist クレジット:

AI モデルをローカルで実行する場合の最大の問題の 1 つは、AI モデルがインターネットから遮断されていることです。 Page Assist がそれを解決します。これは、ローカルでホストされている AI をサイドバーとしてブラウザに直接接続するオープンソースのブラウザ拡張機能です。ターミナル ウィンドウとブラウザの間を行ったり来たりすることなく、作業中にローカル モデルがすぐそこに表示されます。

最も便利なのは、開いているどの Web ページでもチャットできることです。通常は、全体をコピーしてプロンプトに自分で貼り付ける必要があります。 Page Assist はページをスクレイピングし、コンテンツをモデルに直接フィードします。

ページのレンダリングされた HTML を取得し、クリーンな Markdown に変換し、すべてを一度にモデルのコンテキストにドロップするため、多くのページで機能します。これは、記事全体や技術文書を何も見逃すことなくワンショットで取り込むことができるため、大きなコンテキスト ウィンドウでモデルを実行している場合に最適です。

2 番目の方法は、長いコンテンツや少ないメモリで作業している場合に適しています。ページをチャンクに分割し、ローカル埋め込みモデルを使用してインデックスを作成し、質問に実際に関連するセクションのみを抽出します。

Page Assist には、組み込みの Web 検索と個人用ナレッジ ベースも付属しており、独自の PDF、CSV、Word ドキュメントをアップロードして、サイドバーから直接チャットできます。ツールの統合をさらに推進したい場合は、モデル コンテキスト プロトコルの実験的なサポートがありますが、そうする必要はありません。

この拡張機能は、Ollama、LM Studio、llama.cpp、さらには Chrome の組み込み Gemini Nano など、ほとんどすべてのローカル AI バックエンドで動作します。ローカル API エンドポイントを指定するだけで準備完了です。

すべてがブラウザのローカル ストレージに保存されるため、閲覧データがどこにも流出することはありません。ローカル モデルはライブ Web を読み取ることができるため、外部サーバーには何も漏洩しません。


午後のセットアップでデータを完全に制御できるようになります

これらのツールはいずれも、ワンクリックで代替できるものではありません。すべてを連携させるにはセットアップに時間がかかり、停止することなくモデルを実行できるハードウェアが必要になります。トレードオフは、一度実行すると月額料金がかからず、マシンからデータが流出することもなく、このツールで何ができるかできないかをベンダーが決めることもないことです。午後の構成に費やす価値があると思われるなら、おそらくその価値はあります。

このテーマについてさらに詳しく知りたい方は以下をご覧ください

完全ガイドはこちら

関連記事

前の投稿
十分な睡眠がとれていない場合でも、トレーニングをする必要がありますか?
次の投稿
Beeswax は、ミツバチのスペリングが恋しい人のための Wordle のようなゲームです

関連記事