ਸਮੱਗਰੀ 'ਤੇ ਜਾਓ

ਬਲੌਗ

Ollama 'ਤੇ Muse Glimmer: ਇੱਕ GPU 'ਤੇ ਹਮੇਸ਼ਾ-ਚਾਲੂ ਸਥਾਨਕ ਏਜੰਟ

ਮੈਟਾ ਦਾ 30B Apache 2.0 ਏਜੰਟ ਮਾਡਲ — ਟੂਲ ਦੀ ਵਰਤੋਂ, ਦ੍ਰਿਸ਼ਟੀ, ਅਸਫਲਤਾ ਰਿਕਵਰੀ — ਅਤੇ ਵਰਕਸਟੇਸ਼ਨਾਂ 'ਤੇ ਪ੍ਰਾਈਵੇਟ AI ਲਈ ਇਸਦਾ ਕੀ ਅਰਥ ਹੈ

  • Balinder Walia
  • 3 ਮਿੰਟ ਦੀ ਪੜ੍ਹਤ
  • Updated

Meta ਦਾMuse Glimmerਇੱਕ 30B ਓਪਨ ਮਾਡਲ ਹੈ ਜੋ ਹਮੇਸ਼ਾ-ਚਾਲੂ ਸਥਾਨਕ ਏਜੰਟਾਂ ਲਈ ਟਿਊਨ ਕੀਤਾ ਗਿਆ ਹੈ — ਟੂਲ ਦੀ ਵਰਤੋਂ, ਲੰਬੇ ਕਾਰਜ, ਅਸਫਲਤਾ ਰਿਕਵਰੀ, ਵਿਜ਼ਨ — ਅਤੇ ਇਹ ਇੱਕ ਸਿੰਗਲ GPU ਜਾਂ Apple Silicon ਲਈ Apache 2.0 ਦੇ ਤਹਿਤOllama'ਤੇ ਭੇਜਦਾ ਹੈ। ਇੱਥੇ TenthMatrix ਵਪਾਰਕ ਲੈਣਾ ਹੈ।ਲੰਬੇ ਲੇਖਵਿੱਚ ਸਪੈਕਸ, ਬੈਂਚ, ਕਾਰਜਪ੍ਰਣਾਲੀ, ਅਤੇ ਇੱਕ ਉਤਪਾਦਨ ਚੈਕਲਿਸਟ।

Meta Muse Glimmer local agents on Ollama

ਹੇਠਲੀ ਲਾਈਨ।ਕਲਾਉਡ ਫਰੰਟੀਅਰ APIs ਅਜੇ ਵੀ ਪੀਕ ਪੋਲਿਸ਼ ਅਤੇ ਪ੍ਰਬੰਧਿਤ SLAs 'ਤੇ ਜਿੱਤਦੇ ਹਨ। Muse Glimmer ਨਿੱਜੀ, ਹਮੇਸ਼ਾ-ਚਾਲੂ ਏਜੰਟਾਂ ਲਈਡਿਫੌਲਟ ਨੂੰ ਬਦਲਦਾ ਹੈ: ਇੱਕ ਪਰਸੈਪਸ਼ਨ ਏਨਕੋਡਰ ਵਾਲਾ ਇੱਕ ਡਿਸਟਿਲ 30B ਮਾਡਲ ਜੋ ਖਪਤਕਾਰ/ਵਰਕਸਟੇਸ਼ਨ ਹਾਰਡਵੇਅਰ (~18GB ਵਜ਼ਨ, 128K ਸੰਦਰਭ), ਲਾਇਸੰਸਸ਼ੁਦਾ Apache 2.0, ਅਤੇ Claude Code, OpenCode, Hermes Agent, Hermes Agent, Hermes Agent, Hermes Agent via ਵਿੱਚ ਵਾਇਰਡ ਹੈ। ਗੋਪਨੀਯਤਾ, ਏਅਰ-ਗੈਪ, ਅਤੇ ਅਨੁਮਾਨ ਲਗਾਉਣ ਯੋਗ ਯੂਨਿਟ ਲਾਗਤ ਉਤਪਾਦ ਵਿਸ਼ੇਸ਼ਤਾਵਾਂ ਬਣ ਜਾਂਦੀਆਂ ਹਨ - ਖੋਜ ਪ੍ਰੋਜੈਕਟ ਨਹੀਂ।

ਕੀ ਭੇਜਿਆ ਗਿਆ (ਵਪਾਰਕ ਰੂਪਾਂ ਵਿੱਚ)

  • ਹਮੇਸ਼ਾ-ਚਾਲੂ ਸਥਾਨਕ ਏਜੰਟ:ਨੂੰ ਹਾਈਪਰਸਕੇਲਰ 'ਤੇ ਹਰ ਟੋਕਨ ਨੂੰ ਰਾਊਂਡ-ਟ੍ਰਿਪ ਕੀਤੇ ਬਿਨਾਂ ਬਹੁ-ਪੜਾਵੀ ਨੌਕਰੀਆਂ ਰਾਹੀਂ ਕੰਮ ਕਰਦੇ ਰਹਿਣ ਲਈ ਤਿਆਰ ਕੀਤਾ ਗਿਆ ਹੈ।
  • ਟੂਲ ਅਨੁਸ਼ਾਸਨ: ਲੰਬੇ ਵਰਕਫਲੋਜ਼ ਵਿੱਚਸਕੀਮਾ-ਸਹੀ ਫੰਕਸ਼ਨ ਕਾਲਿੰਗ — ਇੱਕ ਡੈਮੋ ਚੈਟਬੋਟ ਅਤੇ ਇੱਕ ਏਜੰਟ ਵਿੱਚ ਅੰਤਰ ਜੋ ਟਿਕਟਾਂ, ਸੰਪਾਦਨ ਕੋਡ, ਜਾਂ MCP ਟੂਲਸ ਦੀਆਂ ਪੁੱਛਗਿੱਛਾਂ ਨੂੰ ਫਾਈਲ ਕਰਦਾ ਹੈ।
  • ਅਸਫਲਤਾ ਰਿਕਵਰੀ:ਜਦੋਂ ਕੋਈ ਟੂਲ ਗਲਤੀ ਕਰਦਾ ਹੈ ਜਾਂ ਬਕਵਾਸ ਕਰਦਾ ਹੈ, ਤਾਂ ਮਾਡਲ ਰਨ ਨੂੰ ਫ੍ਰੀਜ਼ ਕਰਨ ਦੀ ਬਜਾਏ ਨਿਦਾਨ ਕਰਦਾ ਹੈ ਅਤੇ ਦੁਬਾਰਾ ਕੋਸ਼ਿਸ਼ ਕਰਦਾ ਹੈ।
  • ਮਲਟੀਮੋਡਲ:ਸਕ੍ਰੀਨਸ਼ੌਟਸ, ਚਾਰਟ, ਅਤੇ ਦਸਤਾਵੇਜ਼ ਟੈਕਸਟ ਦੇ ਨਾਲ-ਨਾਲ ਆਉਂਦੇ ਹਨ — ਓਪਸ ਕੰਸੋਲ, ਇਨਵੌਇਸ, ਅਤੇ UI ਆਟੋਮੇਸ਼ਨ ਲਈ ਉਪਯੋਗੀ ਹਨ।
  • ਨਿਯੰਤਰਣਯੋਗ ਕੋਸ਼ਿਸ਼: ਹਾਰਡ ਟਿਕਟਾਂ ਲਈਡਾਇਲ ਤਰਕ ਸ਼ਕਤੀ ਉੱਪਰ, ਲੇਟੈਂਸੀ-ਸੰਵੇਦਨਸ਼ੀਲ ਮਾਰਗਾਂ ਲਈ ਹੇਠਾਂ।
  • ਲਾਇਸੈਂਸ:Apache 2.0 — SaaS ਕਾਰਵ-ਆਊਟ ਦੇ ਨਾਲ ਬਹੁਤ ਸਾਰੇ “ਓਪਨ ਵੇਟ” ਕਾਰਡਾਂ ਨਾਲੋਂ ਇੱਕ ਸਾਫ਼ ਵਪਾਰਕ ਕਹਾਣੀ।

Muse Glimmer local agent stack from scaffold to Ollama

ਬੋਰਡਾਂ ਅਤੇ SMEs ਨੂੰ

ਦੀ ਦੇਖਭਾਲ ਕਿਉਂ ਕਰਨੀ ਚਾਹੀਦੀ ਹੈ
  1. ਡਾਟਾ ਰੈਜ਼ੀਡੈਂਸੀ:ਗਾਹਕ PII, ਸਰੋਤ ਕੋਡ, ਅਤੇ ਵਿੱਤੀ ਦਸਤਾਵੇਜ਼ ਵਰਕਸਟੇਸ਼ਨ ਜਾਂ ਪ੍ਰਾਈਵੇਟ VPC 'ਤੇ ਰਹਿ ਸਕਦੇ ਹਨ।
  2. ਯੂਨਿਟ ਅਰਥ ਸ਼ਾਸਤਰ:ਅਨੁਮਾਨ ਲਾਗਤ ਹਾਰਡਵੇਅਰ ਅਮੋਰਟਾਈਜ਼ੇਸ਼ਨ + ਬਿਜਲੀ ਬਣ ਜਾਂਦੀ ਹੈ, ਨਾ ਕਿ ਪ੍ਰਤੀ-ਟੋਕਨ ਇਨਵੌਇਸ ਜੋ ਏਜੰਟ ਲੂਪਸ ਨਾਲ ਵਧਦੇ ਹਨ।
  3. ਨਿਰੰਤਰਤਾ:ਔਫਲਾਈਨ ਜਾਂ ਡੀਗਰੇਡ-ਨੈੱਟਵਰਕ ਸਾਈਟਾਂ (ਫੈਕਟਰੀਆਂ, ਕਲੀਨਿਕ, ਫੀਲਡ ਟੀਮਾਂ) ਏਜੰਟਾਂ ਨੂੰ ਚਲਾਉਂਦੀਆਂ ਰਹਿੰਦੀਆਂ ਹਨ।
  4. ਖਰੀਦ ਸਪੱਸ਼ਟਤਾ:Apache 2.0 + Ollama ਵੰਡ ਕਾਨੂੰਨੀ ਅਤੇ ਓਪਸ ਰਗੜ ਬਨਾਮ ਅਪਾਰਦਰਸ਼ੀ ਵਜ਼ਨ ਡੰਪ ਨੂੰ ਘਟਾਉਂਦੀ ਹੈ।

ਜਿੱਥੇ ਇਹਕਰਦਾ ਹੈਨੂੰ ਕਲਾਊਡ

ਨੂੰ ਬਦਲਦਾ ਹੈ

ਪੀਕ-ਨਾਜ਼ੁਕ ਮਾਰਗਾਂ, ਬ੍ਰਾਂਡ-ਸੰਵੇਦਨਸ਼ੀਲ ਜਨਰੇਸ਼ਨ, ਅਤੇ ਵਰਕਲੋਡਾਂ ਲਈ ਬੰਦ APIs (ਜਾਂ ਇੱਕ ਕਲੱਸਟਰ 'ਤੇ ਵੱਡੇ ਖੁੱਲ੍ਹੇ MoEs) ਨੂੰ ਰੱਖੋ ਜਿਨ੍ਹਾਂ ਨੂੰ ਵਿਕਰੇਤਾ ਸਹਾਇਤਾ SLAs ਦੀ ਲੋੜ ਹੈ। Muse Glimmer ਇੱਕ ਹਾਈਬ੍ਰਿਡ ਰਾਊਟਰ ਵਿੱਚ ਮਜ਼ਬੂਤ ​​ਸਥਾਨਕ/ਪ੍ਰਾਈਵੇਟ ਲੇਨਹੈ — Bedrock ਜਾਂ Anthropic ਨੂੰ ਰਾਤੋ-ਰਾਤ ਬਾਹਰ ਕੱਢਣ ਦਾ ਹੁਕਮ ਨਹੀਂ। ਇਸ ਨੂੰ ਸਾਡੇਏਜੰਟ ਸੁਰੱਖਿਆ ਸੰਖੇਪਵਿੱਚ ਈਵਲਸ, HITL, ਅਤੇ ਨਿਯੰਤਰਣਾਂ ਨਾਲ ਜੋੜੋ।

TenthMatrix ਸਲਾਹ

  • SMEs / Mac ਦੁਕਾਨਾਂ:Apple Silicon 'ਤੇollama run muse-glimmer:30b-mlxਨਾਲ ਸ਼ੁਰੂ ਹੁੰਦਾ ਹੈ (ਜਾਂ ਸਿੰਗਲ ਮਿਡ/ਹਾਈ GPU ਵਰਕਸਟੇਸ਼ਨ 'ਤੇ ਸਟੈਂਡਰਡ 18GB ਟੈਗ)।
  • ਦੇਵ ਟੀਮਾਂ:ollama launch claude --model muse-glimmer(ਜਾਂ OpenCode / Hermes / OpenClaw) ਦੇ ਨਾਲਵਾਇਰ ਸਕੈਫੋਲਡ ਅਤੇ ਆਪਣੇ ਸੁਨਹਿਰੀ ਕਾਰਜਾਂ ਨੂੰ ਮਾਪੋ — ਇਕੱਲੇ ਮੈਟਾ ਦੇ ਲੀਡਰਬੋਰਡ ਨੂੰ ਨਹੀਂ।
  • ਐਂਟਰਪ੍ਰਾਈਜਿਜ਼:ਪਾਇਲਟ ਏਅਰ-ਗੈਪਡ ਏਜੰਟ ਪੌਡਸ ਰੀਵਿਊ ਬੋਟ + GitOps ਨਾਲ; ਓਵਰਫਲੋ ਲਈ ਇੱਕ ਕਲਾਉਡ ਫੇਲਓਵਰ ਰੱਖੋ।

ਪੂਰਾ ਤਕਨੀਕੀ ਰੀਰਾਈਟ — ਆਰਕੀਟੈਕਚਰ, Ollama ਟੈਗ, ਬੈਂਚਮਾਰਕ ਮੈਟ੍ਰਿਕਸ ਬਨਾਮ Gemma4-31B / Qwen3.6-27B, ਮੈਟਾ ਮੁਲਾਂਕਣ ਵਿਧੀ, ਅਤੇ ਇੱਕ ਉਤਪਾਦਨ ਚੈਕਲਿਸਟ:ਲੰਬਾ ਲੇਖ।TenthMatrixਦੁਆਰਾ ਪ੍ਰਕਾਸ਼ਿਤ।