evaluate-agent-framework
정보
이 스킬은 엔지니어링 리소스를 투입하기 전에 오픈소스 AI 에이전트 프레임워크의 투자 적합성을 평가합니다. 커뮤니티 활성도, 대체 위험성, 아키텍처 및 거버넌스를 분석하여 4단계 분류(투자/추가-평가/신중한-기여/회피) 결과를 제공합니다. 프로덕션 사용을 위해 프레임워크를 도입할지 평가하고 자원 배분 결정을 안내해야 할 때 활용하세요.
빠른 설치
Claude Code
추천npx skills add pjt222/agent-almanac -a claude-code/plugin add https://github.com/pjt222/agent-almanacgit clone https://github.com/pjt222/agent-almanac.git ~/.claude/skills/evaluate-agent-frameworkClaude Code에서 이 명령을 복사하여 붙여넣어 스킬을 설치하세요
문서
估 Agent 框
結構估開源 agent 框之投資備度。新值在二、三步:以貢獻存活率量社群健,並量取代險——工敗最常因。末分類(INVEST / EVALUATE-FURTHER / CONTRIBUTE-CAUTIOUSLY / AVOID)定資之分配於投開發週期前。
用
- 估是否採 agent 框為生產用
- 估項目所依框之險
- 決是否投工於外項
- 較競框以定建對採
- 大布、治變、收購後重估框
入
- 必:
framework_url— 框庫之 GitHub URL - 可:
comparison_frameworks— 以基較之它框 URL 列use_case— 架合估之意用(如「多 agent 協」「工具用管」)contribution_budget— 計工時,以校投級
行
一:集框普查
深析前,集項目之大、動、域位之基數。
- 取讀
README.md、CONTRIBUTING.md、LICENSE、諸架文(docs/、ARCHITECTURE.md) - 集量指:
- 星、叉、開議、開 PR:
gh repo view <repo> --json stargazerCount,forkCount,issues,pullRequests - 依庫:察 GitHub「Used by」或
gh api repos/<owner>/<repo>/dependents - 發頻:
gh release list --limit 10— 察頻與是否循 semver
- 星、叉、開議、開 PR:
- 算 bus factor:識末 12 月 commit 數前 5 者。若首者佔 >60%,bus factor 危低
- 映域位:
- Pioneer:先動者,定類(高響、於從者高取代險)
- Fast-follower:於先 6 月內起,迭其念
- Late entrant:於類穩後至,競於特或治
- 若
comparison_frameworks予→為各替集同指
得:普查表載星、叉、依、發頻、bus factor、域位(含較者若予)。
敗:庫私或 API 限→退於人 README 析。指無(如自托 GitLab)→記缺而以質估續行。
二:估社群健
量項目是否迎、持、留外貢。
- 算外貢存活率:
- 取末 50 閉 PR:
gh pr list --state closed --limit 50 --json author,mergedAt,closedAt,labels - 各 PR 作者分為內(組員)或外
- 計:
survival_rate = merged_external_PRs / total_external_PRs - 健門:>50%;憂:<30%
- 取末 50 閉 PR:
- 量回應:
- 議首應時:議建至首維者評之中位
- PR 合延:外 PR 自開至合之中位
- 健:<7 日首應、<30 日合;憂:>30 日首應
- 估貢多樣:
- 末 6 月之外/內貢比
- 有 >=2 合 PR 之獨外貢者數(重複貢顯健生態)
- 察治遺物:
CONTRIBUTING.md存且可行(非僅「submit a PR」)CODE_OF_CONDUCT.md存- 治文述決策程
- 議/PR 模引貢者
得:社群健記分表,含存活率、應時、多樣比、治遺物單。
敗:PR 數不足(新項 <20 閉 PR)→記樣限並重他信。項用非 GitHub→適其 API 之詢。
三:算取代險
定外貢被內發淘汰之機——框採者與貢者之最大險。
- 取末 50-100 合外 PR(不足則全)
- 各合外 PR 察其碼後是否:
- Reverted:明 revert commit 引 PR
- Rewritten:同文/模於 90 日內由內者大改
- Obsoleted:特於後發中去或代
- 計:
supersession_rate = (reverted + rewritten + obsoleted) / total_merged_external - 映已布路圖(若予)與外貢活區:
- 高重 = 高取代險(內將建於外工)
- 低重 = 低取代險(外填內不填)
- 察「貢陷」:似貢友而排為內重寫之區
- 基:NemoClaw 析顯 71% 外 PR 於 6 月內被代 — 校點
得:取代率為百分,按類分(reverted/rewritten/obsoleted)。路重估。
敗:commit 史淺或 squash 合(失歸屬)→以外 PR 文徑較後發所改文估。記估信減。
四:估架合
估框架是否合用而不過鎖。
- 映擴點:
- 插/擴 API:框露文插介否?
- 組態面:行可不叉而定否?
- 鈎/回呼:可於要點截改否?
- 估鎖險:
- 遷費:估離之工(日/週/月)
- 數攜:數/態可以標式出否?
- 標遵:框用開標(agentskills.io、MCP、A2A)或專協?
- 估 API 穩:
- 計每大發之破變(CHANGELOG、遷指)
- 察棄策(去前先警)
- 估 semver 遵(破變僅於大版)
- 察合特用:
- 若
use_case予→估框架是否自然持之 - 識須繞之架錯
- 若
- 估互通:
- agentskills.io 容(技模合)
- MCP 持(工入)
- A2A 協持(agent 間通)
得:架合報,含擴點清、鎖險(低/中/高)、API 穩分、用合估。
敗:架文稀→由碼構與公 API 面推之。框過新無穩史→記而重治信。
五:估治與續
估項目之治模是否持久可維且公對外貢。
- 分治模:
- BDFL:單決——快而 bus factor 險
- Committee/Core team:分決——慢而韌
- Foundation-backed:正式治(Apache、Linux Foundation、CNCF)——最續
- Corporate-controlled:單司驅——察抽毯險
- 估資與續:
- 資源:VC 支、司贊、補、社群籌、無資
- 全職維者:>=2 健;0 紅旗
- 入模(若有):項目自維何法?
- 估貢保:
- 證類:寬(MIT、Apache-2.0)對左(GPL)對定
- CLA 求:簽 CLA 轉權使貢不利否?
- 貢認:外貢於發、changelog、文中得記否?
- 察安態:
- 安披露策(
SECURITY.md或等) - 自 CVE 披至補之中位時
- 依更踐(Dependabot、Renovate、人)
- 安披露策(
- 估軌:
- 治模漸進(如向基會移)?
- 近有領換、收、重證?
- 維與貢間有公爭?
得:治估,含模分、續率(續/險/危)、貢保估、安態摘。
敗:治信無文→無即黃旗。察誰合 PR、誰閉議、誰決發以推隱治。
六:分投備度
綜諸見入四級分類與特理由及可行建。
- 各維計分(1-5):
- 社群健:存活率、回應、多樣
- 取代險:率、路重、貢陷(反:低佳)
- 架合:擴點、鎖、穩、用合
- 治續:模、資、保、安
- 施分類門:
- INVEST(諸維 >=4):健社群、低取代(<20%)、合架、續治。安採而投工
- EVALUATE-FURTHER(雜,無維 <2):雜信須特隨察。記待清事並設重估日
- CONTRIBUTE-CAUTIOUSLY(任維 2,無 <2):高取代(>40%)或治憂。貢限於明求工、維准範、與核耦之插/擴
- AVOID(任維 1):要紅旗——棄項、敵外(存活 <15%)、不容證、或將抽毯兆。勿投工
- 書分類報:
- 首列級與一句理
- 各維分以關證摘
- 若
contribution_budget予→建依級分配 - EVALUATE-FURTHER:列待答特問並提時
- CONTRIBUTE-CAUTIOUSLY:定何貢安(插、文、試)對險(核特)
- 若
comparison_frameworks估→生較矩排諸框
得:分類報載級、各維分、證摘、依投境之可行建。
敗:數缺阻信分類→默 EVALUATE-FURTHER 並明錄何缺何取。不確時永勿默 INVEST。
驗
- 普查數集:星、叉、依、發頻、bus factor、域位
- 社群健已量:存活率、應時、多樣、治遺物
- 取代險已算並按類分(reverted/rewritten/obsoleted)
- 架合已估:擴點、鎖險、API 穩、用合
- 治已估:模、資、貢保、安態
- 分類已生:INVEST / EVALUATE-FURTHER / CONTRIBUTE-CAUTIOUSLY / AVOID 之一
- 各維分以析中特證理
- 建可行並校於貢預(若予)
- 數缺與信限已明錄
忌
- 混名於健:高星而貢多樣低→單敗點。5 萬星單維項較 2 千星 15 活貢項弱
- 忽取代險:外貢敗最常因。迎社群於內發常覆外工則空
- 重架而不察治:美設框若治不續或敵外仍敗
- 視 EVALUATE-FURTHER 為 AVOID:雜信須查,非拒。設具重估日並列待答問
- 快照偏:諸指為時點。降項今指佳劣於升項今指平。察 6-12 月軌向
- CLA 大意:有 CLA 轉版權與項主,貢成其專產。讀 CLA 文,勿僅勾
- 單框定錨:無較框則任項皆顯極佳或極劣。必基至少一替,縱非正式
參
- polish-claw-project — 此估啟之貢流
- review-software-architecture — 四步架估所用
- forage-solutions — 較用替框發現
- search-prior-art — 域映與先工析
- security-audit-codebase — 五步安態估所引
- assess-ip-landscape — 證與 IP 險析
GitHub 저장소
연관 스킬
executing-plans
디자인executing-plans 스킬은 검토 체크포인트가 포함된 통제된 배치로 실행할 완전한 구현 계획이 있을 때 사용합니다. 이 스킬은 계획을 불러와 비판적으로 검토한 후, 소규모 배치(기본값 3개 작업)로 작업을 실행하면서 각 배치 사이에 진행 상황을 아키텍트 검토를 위해 보고합니다. 이를 통해 내재된 품질 관리 체크포인트를 갖춘 체계적인 구현이 보장됩니다.
requesting-code-review
디자인이 스킬은 코드 변경 사항을 요구 사항에 따라 분석하기 위해 코드 리뷰어 하위 에이전트를 호출합니다. 작업 완료 후, 주요 기능 구현 후, 또는 메인 브랜치에 병합하기 전에 사용해야 합니다. 이 리뷰는 현재 구현체와 원래 계획을 비교하여 문제를 조기에 발견하는 데 도움이 됩니다.
connect-mcp-server
디자인이 스킬은 개발자들이 HTTP, stdio 또는 SSE 전송 방식을 통해 MCP 서버를 Claude Code에 연결하는 포괄적인 가이드를 제공합니다. GitHub, Notion 및 사용자 정의 API와 같은 외부 서비스를 통합하기 위한 설치, 구성, 인증 및 보안을 다룹니다. MCP 통합 설정, 외부 도구 구성 또는 Claude의 모델 컨텍스트 프로토콜 작업 시 활용하세요.
web-cli-teleport
디자인이 스킬은 작업 분석을 기반으로 개발자가 Claude Code 웹 인터페이스와 CLI 인터페이스 중 선택할 수 있도록 돕고, 두 환경 간 원활한 세션 텔레포트를 가능하게 합니다. 웹, CLI 또는 모바일 환경 전환 시 세션 상태와 컨텍스트를 관리하여 워크플로를 최적화합니다. 다양한 단계에서 서로 다른 도구가 필요한 복잡한 프로젝트에 사용하세요.
