How long does the integration take?

Change one base URL in an OpenAI-compatible client, or install the Python or TypeScript SDK; the quickstart routes a first request in a few minutes.

Will this lock us into another vendor?

No. The router is Apache-2.0 open source, your provider keys stay yours, and the API is OpenAI-compatible, so leaving is a change of base URL.

What happens when a provider fails?

The router falls back to the next model your policy allows and records the fallback in the trace, so an outage costs a retry, not an incident.

measure-dont-guess - Skill

Name: measure-dont-guess
Author: masseater

measure-dont-guess

仮説を白黒つける計測を実装や修正の前に決めて実行し、その結果だけで判断する。不具合の原因を調べるとき、性能や挙動を比べるとき、新しい機能を書き始めるとき、「たぶん」で判断しそうになったときに使う。

by masseater(0) 0 installs

Imported from masseater/skills (skills/measure-dont-guess/SKILL.md) via skills.sh. Install upstream with npx skills add masseater/skills --skill measure-dont-guess. Copyright stays with the author.

measure-dont-guess

推測ではなく計測で判断するための規則である。

計る前に、仮説と採用する値を書く
本番か、本番と同じ条件で計る
計測していない主張は推測と明記する
計れないときは推測で進めず、何が足りないかをユーザーに伝える

この skill が必要な理由と達成したい状態

この skill が必要な理由は、推測が計るより速く答えを出し、たいてい筋が通って見えることにある。推測で進めた変更は、結果が正しくても偶然か根拠によるものかを区別できない。間違っていても気づく材料が残らない。次に同じ判断をする人は、また推測から始める。

この skill で達成したい状態は、すべての判断が、誰でも再現できる根拠に基づいていることである。

本番での計測

判断の根拠にする計測は、本番環境で行う。手元やテスト環境は、データの規模や外部サービスが違い、本番と逆の結論が出ることがある。

本番で計れないときは、ステージング環境を作って計る
ステージングは、コード、設定、インフラ、データの規模と形、外部サービスを本番と同じにする
手元やテスト環境の計測は、計る仕組みが動くかを確かめるためだけに使う

計測の記録

計測していない主張は推測と明記する
変更の根拠にした計測は、条件とコマンドと結果をコミットメッセージに書く
都合の悪い結果が出たら、そのまま報告して仮説を見直す

用途

次もすべて読むこと。

measure。仮説を立てて計り、結果で判断する
find-root-cause。不具合の根本原因を探す
improve-performance。性能を改善する

参照

typescript-template も読むこと。masseater/typescript-template から作ったリポジトリで、何をどこで計るかを書いている。ほかのリポジトリでは、同じ役割のものに読み替える。

# after Install: the listing is in your workspace's routing pool - a plan picks it for its slot curl -s -X POST https://api.opensmartroute.ai/api/v1/route -H 'Authorization: Bearer $OSR_API_KEY' -H 'Content-Type: application/json' -d '{"text": "...", "plan": true}'

Install measure-dont-guess and it becomes one more candidate the router can pick - when it fits.

A listing is a routing target with a manifest: what it does, which domains it covers, what it costs and who publishes it. Once installed it sits beside your own models and tools, is scored like any other candidate for each request, and shows up in the trace when it wins. Ratings come from workspaces that installed it, one per account.

{ "ocm": "1", "id": "masseater-skills-measure-dont-guess", "kind": "skill", "name": "measure-dont-guess", "description": "仮説を白黒つける計測を実装や修正の前に決めて実行し、その結果だけで判断する。不具合の原因を調べるとき、性能や挙動を比べるとき、新しい機能を書き始めるとき、「たぶん」で判断しそうになったときに使う。", "publisher": "masseater", "version": "1.0.0", "capabilities": { "domains": [ "coding" ], "tags": [ "skill-md", "skills-sh" ], "languages": [ "en" ] }, "quality_prior": 0.6, "examples": [ "仮説を白黒つける計測を実装や修正の前に決めて実行し、その結果だけで判断する。不具合の原因を調べるとき、性能や挙動を比べるとき、新しい機能を書き始めるとき、「たぶん」で判断しそうになったときに使う。" ], "primary": false, "metadata": { "source": { "provider": "skills.sh", "repository": "https://github.com/masseater/skills", "path": "skills/measure-dont-guess/SKILL.md", "ref": "HEAD", "url": "https://www.skills.sh/masseater/skills/measure-dont-guess", "key": "masseater/skills/skills/measure-dont-guess/SKILL.md" } }, "instructions": "# measure-dont-guess\n\n推測ではなく計測で判断するための規則である。\n\n- 計る前に、仮説と採用する値を書く\n- 本番か、本番と同じ条件で計る\n- 計測していない主張は推測と明記する\n- 計れないときは推測で進めず、何が足りないかをユーザーに伝える\n\n## この skill が必要な理由と達成したい状態\n\nこの skill が必要な理由は、推測が計るより速く答えを出し、たいてい筋が通って見えることにある。推測で進めた変更は、結果が正しくても偶然か根拠によるものかを区別できない。間違っていても気づく材料が残らない。次に同じ判断をする人は、また推測から始める。\n\nこの skill で達成したい状態は、すべての判断が、誰でも再現できる根拠に基づいていることである。\n\n## 本番での計測\n\n判断の根拠にする計測は、本番環境で行う。手元やテスト環境は、データの規模や外部サービスが違い、本番と逆の結論が出ることがある。\n\n- 本番で計れないときは、ステージング環境を作って計る\n- ステージングは、コード、設定、インフラ、データの規模と形、外部サービスを本番と同じにする\n- 手元やテスト環境の計測は、計る仕組みが動くかを確かめるためだけに使う\n\n## 計測の記録\n\n- 計測していない主張は推測と明記する\n- 変更の根拠にした計測は、条件とコマンドと結果をコミットメッセージに書", "cost": { "context_tokens": 247 } }

measure-dont-guess

About

measure-dont-guess

この skill が必要な理由と達成したい状態

本番での計測

計測の記録

用途

参照

Use it

Install measure-dont-guess and it becomes one more candidate the router can pick - when it fits.

What it costs to adopt - in engineering time.

One base URL

No vendor lock-in

Failover built in

Manifest

Reviews