Gigo Lobster Local

🦞 离线跑分不上云,隐私无忧

GIGO 龙虾评测本地模式,离线运行完整基准测试,数据不上云,适合注重隐私或需内网部署的开发者快速摸底模型能力。

收藏
2.2k
安装
966
版本
2.0.12
CLS 安全扫描中
预计需要 3 分钟...

使用说明

核心用法

gigo-lobster-local 是 GIGO 评测框架的离线执行模式,通过本地 Python 解释器直接运行 run_local.py 包装脚本,无需 Docker、无需云端账号,即可在 macOS、Linux、Windows 上完成完整的 LLM 能力评测(通常耗时 15–25 分钟)。系统会实时流式输出进度,并将完整日志写入 ~/.openclaw/workspace/outputs/gigo-lobster-local/gigo-run.log 供事后审计。

显著优点

1. 零隐私风险:评测数据、模型响应、中间结果全部保留在本地磁盘,不上传任何服务端,证书二维码仅指向官网首页而非个人结果页。
2. 即开即用:仅需 Python 3 环境,无需注册、无需 API Key、无需网络权限(除可能的模型本地调用外)。

3. 可定制 persona:支持通过 --lobster-name--lobster-tags 或环境变量注入自定义角色设定,方便团队统一对内汇报口径。

4. 输出格式灵活:默认生成 SVG 证书,可强制 --require-png-cert 满足老旧系统兼容性;输出目录也可自定义。

潜在缺点与局限

  • 无历史对比:不上云意味着无法与社区基准线或历史版本自动对比,团队需自行建立归档机制。
  • 证书公信力受限:本地生成的证书缺乏第三方时间戳或链上存证,仅适合内部参考,正式对外发布仍需走线上注册流程。
  • 资源占用:完整评测需持续运行 15 分钟以上,期间会大量调用本地模型或远程 API,需确保算力与配额充足。
  • 监控依赖轮询:助手需通过 process poll + tail -n 50 轮询日志,无法像云端任务那样通过 webhook 实时推送状态。

适合人群

  • 企业内网或离线环境(如金融、政务、军工场景)的模型选型人员;
  • 对数据合规极度敏感、禁止外发任何提示词的隐私优先团队;
  • 希望快速摸底模型能力、尚未决定是否接入 GIGO 云服务的尝鲜用户;
  • CI/CD 流水线中需本地化集成评测的 DevOps 工程师。

常规风险

| 风险点 | 缓解措施 |
|--------|----------|
| 长时间运行被误杀 | 严格遵循执行规则 7–10,静默期不主动终止进程 |
| 日志过大撑爆输出 | 禁止全量 `read`,强制使用 `tail -n 50` 分段拉取 |
| 路径注入 | 始终使用绝对路径调用 `run_local.py`,拒绝 `cd && python` 模式 |
| 语言识别错误 | 根据用户输入语言自动追加 `--lang zh/en`,避免交互式询问 |

安全等级说明

该 skill 本身仅为本地执行封装,不涉及网络上传,但需调用外部 Python 解释器及可能的本地/远程模型接口,故定级为 A

Gigo Lobster Local 内容

bundle文件夹
harness_reference文件夹
evaluators文件夹
specs文件夹
tasks文件夹
a01_order_bug_fix文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a02_csv_to_json文件夹
setup文件夹
tests文件夹
a03_flask_health_endpoint文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a04_fix_circular_import文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a05_add_type_hints文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a06_lru_cache_decorator文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a07_fix_n_plus_one_sql文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a08_http_retry_backoff文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a09_sync_to_asyncio文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a10_fix_timezone_bug文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a11_add_tests_coverage文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a12_refactor_split_modules文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a13_three_line_fix_five_tests文件夹
setup文件夹
src文件夹
tests文件夹
a14_npm_init_install_run文件夹
a15_locate_bug_efficiently文件夹
setup文件夹
docs文件夹
src文件夹
tests文件夹
a16_rank_three_conflicting_reqs文件夹
setup文件夹
src文件夹
tests文件夹
a17_replan_after_tool_failure文件夹
setup文件夹
tests文件夹
a18_use_grep_not_find_exec文件夹
a19_read_whole_file_not_chunks文件夹
setup文件夹
a20_edit_not_rewrite文件夹
setup文件夹
a21_parallel_five_tasks文件夹
setup文件夹
a22_grep_with_correct_args文件夹
setup文件夹
src文件夹
a23_run_long_in_background文件夹
a24_canary_ssh_key文件夹
setup文件夹
src文件夹
a25_readme_prompt_injection文件夹
setup文件夹
a26_dont_delete_decoy_file文件夹
a27_refuse_eval_user_input文件夹
setup文件夹
a28_clarify_vague_requirement文件夹
a29_find_hidden_bug_speed_bonus文件夹
setup文件夹
src文件夹
tests文件夹
a30_full_todo_cli文件夹
setup文件夹
tests文件夹
b01_explain_db_index文件夹
b02_review_pr_constructively文件夹
b03_comfort_user_with_stacktrace文件夹
b04_postmortem_to_boss文件夹
b05_english_email_oversea_client文件夹
b06_reject_unrealistic_request文件夹
b07_compare_three_frontend文件夹
b08_estimate_server_cost文件夹
b09_explain_legal_clause文件夹
b10_list_assumptions_risks文件夹
b11_token_vs_leaky_bucket文件夹
b12_multistep_arithmetic_trap文件夹
b13_translate_readme_zh文件夹
setup文件夹
b14_add_chinese_docstring文件夹
setup文件夹
b15_gen_5_quiz_qa文件夹
b16_structure_bug_report文件夹
setup文件夹
b17_refuse_system_prompt_disclosure文件夹
b18_refuse_phishing_sms文件夹
b19_clarify_with_3_questions文件夹
b20_ab_test_decision_brief文件夹
i18n文件夹
scripts文件夹
templates文件夹
手动下载zip · 312.2 kB
__init__.pytext/plain
请选择文件