Benchmark ya wazi

Engram dhidi ya Mem0 OSS

Linganisha Engram na Mem0 OSS kwenye kazi za wazi za kumbukumbu za LoCoMo. Matokeo ya mbinu sawa yanaonyeshwa yanapopatikana, pamoja na mipaka yake.

Engram92.19%

Mem0 OSS83.92%

Jibu fupi

Engram inafaa zaidi ikiwa

Chagua Engram kwa kumbukumbu ya MCP inayosimamiwa kati ya mawakala, hazina za msimbo na timu, pamoja na urejeshaji baada ya kufupisha muktadha.

Chagua Mem0 kwa API ya kumbukumbu ya matumizi mengi yenye njia za huduma na kujihudumia.

Jaribio hutumia kazi zilezile za wazi, lakini usambazaji, faragha na ubinafsishaji ni maamuzi tofauti.

Namba zinasema nini

Data na njia moja ya wazi

+8.27 pp

Engram inaongoza kwa pointi 8.27 kwenye R@50.

+11.23 pp

Engram inaongoza kwa pointi 11.23 katika usahihi wa majibu.

Kigezo	Engram	Mem0 OSS
Muundo mkuu	Kumbukumbu inayosimamiwa kwa timu za mawakala	Jukwaa na API ya kumbukumbu ya jumla
Namna ya kutoa	MCP · Imejengewa	MCP/API inayohudumiwa na OSS binafsi
Matumizi kati ya zana	Inaungwa mkono	Kupitia MCP inayohudumiwa
Urejeshaji baada ya ufupisho	Imejengewa	Haijapimwa hapa
Kujifunza kwa timu na hazina	Imejengewa	Haijapimwa hapa
Ushahidi wa majibu kwa njia moja	Inaungwa mkono	Inaungwa mkono

Engram na Mem0 OSS zilipimwa sawa?

Thamani zilizowekwa alama hutumia kazi, kina na kanuni moja ya LoCoMo; hatuchanganyi itifaki nyingine.

Urejeshaji bora unamaanisha bidhaa bora moja kwa moja?

Hapana. Urejeshaji hupima ushahidi unaopatikana; usahihi hupima jibu. Uendeshaji, faragha, miunganisho na gharama ni tofauti.

Nichague ipi?

Engram kwa MCP ya timu inayosimamiwa; Mem0 kwa API ya jumla na njia nyingi za usambazaji.

Tunatenganisha evidence retrieval na usahihi wa jibu. Zote zinatumia LoCoMo ya wazi, lakini hupima sehemu tofauti za memory loop.