Gigo Lobster Taster

🦞 正式评测·云端排名·生成专属成绩页

运行完整龙虾评测,上传云端生成个人结果页并进入排行榜,适合追求量化AI性能排名的进阶用户。

收藏
3.3k
安装
1.1k
版本
2.0.12
CLS 安全扫描中
预计需要 3 分钟...

使用说明

核心用法

gigo-lobster-taster 是 GIGO 生态的正式评测技能,用于对当前运行环境进行完整性能基准测试。用户通过触发词(如「试吃我的龙虾」或 "lobster taste")启动后,技能会调用 run_upload.py 执行标准化评测流程,最终上传验证结果、生成可分享的个人结果页,并自动进入公开排行榜。

执行时自动检测 Python 环境(优先 python3),支持中英文语言参数(--lang zh/en)。评测过程通常持续 15-25 分钟,期间实时流式输出进度,完整日志写入 gigo-run.log

显著优点

  • 结果可信可溯:评测数据云端托管,生成带验证的分享页,避免本地篡改争议
  • 竞技排名机制:自动进入 leaderboard,满足用户的竞争与社交展示需求
  • 多语言适配:原生支持中英文界面,降低国际化用户门槛
  • 灵活身份定制:可通过 --lobster-name--lobster-tags 或环境变量定义评测主体身份(如特定模型/硬件配置)
  • 健壮执行策略:预置长进程监控规则,不因 stdout 静默而误判失败

潜在缺点与局限性

  • 耗时较长:完整跑测 15-25 分钟,不适合快速验证场景
  • 网络依赖:默认上传云端,离线或隐私敏感环境需显式使用 --skip-upload
  • 排名压力:公开 leaderboard 可能暴露硬件配置细节,企业内网用户需谨慎
  • 日志体积:长时间运行产生较大日志文件,不当读取可能撑爆对话输出

适合人群

  • 需要量化对比不同 AI 运行环境(模型+硬件)性能的技术用户
  • 追求公开验证、可分享 benchmarking 结果的模型开发者或硬件评测者
  • 社区/竞赛组织者,需标准化评测流程生成可信排名

常规风险

  • 隐私泄露:评测报告可能包含系统信息、硬件指纹,上传前建议审查 --lobster-tags 内容
  • 资源占用:跑测期间高负载运行,可能影响同机其他服务
  • 网络中断:长进程上传阶段断网可能导致结果丢失,需保留本地日志 gigo-run.log 备查
  • 误触发排名:未加 --skip-upload 时默认公开,误操作可能导致不期望的公开记录

Gigo Lobster Taster 内容

bundle文件夹
harness_reference文件夹
evaluators文件夹
specs文件夹
tasks文件夹
a01_order_bug_fix文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a02_csv_to_json文件夹
setup文件夹
tests文件夹
a03_flask_health_endpoint文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a04_fix_circular_import文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a05_add_type_hints文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a06_lru_cache_decorator文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a07_fix_n_plus_one_sql文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a08_http_retry_backoff文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a09_sync_to_asyncio文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a10_fix_timezone_bug文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a11_add_tests_coverage文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a12_refactor_split_modules文件夹
fixtures文件夹
setup文件夹
src文件夹
tests文件夹
a13_three_line_fix_five_tests文件夹
setup文件夹
src文件夹
tests文件夹
a14_npm_init_install_run文件夹
a15_locate_bug_efficiently文件夹
setup文件夹
docs文件夹
src文件夹
tests文件夹
a16_rank_three_conflicting_reqs文件夹
setup文件夹
src文件夹
tests文件夹
a17_replan_after_tool_failure文件夹
setup文件夹
tests文件夹
a18_use_grep_not_find_exec文件夹
a19_read_whole_file_not_chunks文件夹
setup文件夹
a20_edit_not_rewrite文件夹
setup文件夹
a21_parallel_five_tasks文件夹
setup文件夹
a22_grep_with_correct_args文件夹
setup文件夹
src文件夹
a23_run_long_in_background文件夹
a24_canary_ssh_key文件夹
setup文件夹
src文件夹
a25_readme_prompt_injection文件夹
setup文件夹
a26_dont_delete_decoy_file文件夹
a27_refuse_eval_user_input文件夹
setup文件夹
a28_clarify_vague_requirement文件夹
a29_find_hidden_bug_speed_bonus文件夹
setup文件夹
src文件夹
tests文件夹
a30_full_todo_cli文件夹
setup文件夹
tests文件夹
b01_explain_db_index文件夹
b02_review_pr_constructively文件夹
b03_comfort_user_with_stacktrace文件夹
b04_postmortem_to_boss文件夹
b05_english_email_oversea_client文件夹
b06_reject_unrealistic_request文件夹
b07_compare_three_frontend文件夹
b08_estimate_server_cost文件夹
b09_explain_legal_clause文件夹
b10_list_assumptions_risks文件夹
b11_token_vs_leaky_bucket文件夹
b12_multistep_arithmetic_trap文件夹
b13_translate_readme_zh文件夹
setup文件夹
b14_add_chinese_docstring文件夹
setup文件夹
b15_gen_5_quiz_qa文件夹
b16_structure_bug_report文件夹
setup文件夹
b17_refuse_system_prompt_disclosure文件夹
b18_refuse_phishing_sms文件夹
b19_clarify_with_3_questions文件夹
b20_ab_test_decision_brief文件夹
i18n文件夹
scripts文件夹
templates文件夹
手动下载zip · 312.3 kB
__init__.pytext/plain
请选择文件