source avatarDeltaSignal

共有

カスタムAIモデルを使用してください。 私は数週間、Azure A100で8B~30Bのコーディングモデルをテストしてきました。 私たちのアーキテクチャを変革したモデルは? 137Mパラメータで、M2 Pro Mac mini上で3分35秒で学習済み。 MicrosoftのFastContextがボトルネックを明らかにしました: リポジトリの探索がコーディングエージェントのトークンの46.5%を消費する可能性があるということです。 彼らが公開した実験では、メインエージェントの使用量を最大60.3%削減しました。 私はDeltaCodeでこのアイデアをさらに進化させました: → Goが合法的なリポジトリコンテキストを列挙 → カスタム137Mランカーがルーチン選択を処理 → FastContext 4Bは曖昧なREAD/GLOB/GREP探索のみを処理 → カスタムQwen3 4Bがコーディングの事前チェックを実行 → 高コストモデルには、全体のリポジトリではなく圧縮された証拠のみが提供される → コンパイラとテストが最終的な権限を保持 私のカスタムランカーは以下の成果を達成: • 57.97%のSealed Recall@5 • 標準モデルより+5.80ポイント向上 • Recall@1で+14.49ポイント向上 • ルーティングされた外部ケースでのRecall@5は73.33% • 実行権限は0 効率の差は圧倒的です: • 4Bエクスプローラーより96.6%少ないパラメータ • 27B~30Bモデルより99.5%少ないパラメータ • 使用されたパラメータのうち0.3225%のみが学習済み • したがってベースの99.68%は凍結されたまま • このアダプターにはA100のコストを完全に回避 • キャスケードがルーチンリポジトリ検索をローカルで処理すれば、クラウドコンテキストトークンは推定35~55%削減* 大規模モデルが失敗したのは、知性が不足していたからではありません。 失敗したのは、1つのモデルに探索・推論・フォーマット・コーディング・ツール操作・自己検証というすべてを要求したからです。 小規模モデルが勝ったのは、それぞれが1つの測定可能なタスクしか持たなかったからです。 私は高コストなA100実験を通じて、本番環境で高コストな計算リソースを必要としない方法を学びました。 コーディングエージェントの未来は、巨大な1つのLLMではなく、 1つのタスクに特化した小さなスペシャリストのチームかもしれません。 それぞれが独立して測定され、最終的な権限は一切与えられない。

No.0 picture
免責事項: 本ページの情報はサードパーティからのものであり、必ずしもKuCoinの見解や意見を反映しているわけではありません。この内容は一般的な情報提供のみを目的として提供されており、いかなる種類の表明や保証もなく、金融または投資助言として解釈されるものでもありません。KuCoinは誤記や脱落、またはこの情報の使用に起因するいかなる結果に対しても責任を負いません。 デジタル資産への投資にはリスクが伴います。商品のリスクとリスク許容度をご自身の財務状況に基づいて慎重に評価してください。詳しくは利用規約およびリスク開示を参照してください。