> ## Documentation Index
> Fetch the complete documentation index at: https://wb-21fd5541-docs-3071-org-scoped-api-keys.mintlify.site/llms.txt
> Use this file to discover all available pages before exploring further.

# 評価<R, E, M>

> TypeScript SDK リファレンス

一連の scorer とデータセットを含む評価を設定します。

evaluation.evaluate(model) を呼び出すと、データセットの各行がモデルに渡されます。このとき、
データセットの列名が model.predict の引数名に対応付けられます。

その後、すべての scorer が呼び出され、結果が weave に保存されます。

定義場所: [src/evaluation.ts:139](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/evaluation.ts#L139)

## 例

```ts twoslash theme={null}
// @noErrors
// examples をデータセットに収集する
const dataset = new weave.Dataset({
  id: 'my-dataset',
  rows: [
    { question: 'What is the capital of France?', expected: 'Paris' },
    { question: 'Who wrote "To Kill a Mockingbird"?', expected: 'Harper Lee' },
    { question: 'What is the square root of 64?', expected: '8' },
  ],
});

// カスタムスコアリング関数を定義する
const scoringFunction = weave.op(function isEqual({ modelOutput, datasetRow }) {
  return modelOutput == datasetRow.expected;
});

// 評価する関数を定義する
const model = weave.op(async function alwaysParisModel({ question }) {
  return 'Paris';
});

// 評価を開始する
const evaluation = new weave.Evaluation({
  id: 'my-evaluation',
  dataset: dataset,
  scorers: [scoringFunction],
});

const results = await evaluation.evaluate({ model });
```

<div id="extends">
  ## 継承元
</div>

* [`WeaveObject`](./weaveobject)

<div id="type-parameters">
  ## タイプパラメーター
</div>

<div id="r">
  ### R
</div>

`R` *extends* `DatasetRow`

<div id="e">
  ### E
</div>

`E` *extends* `DatasetRow`

<div id="m">
  ### M
</div>

`M`

<div id="constructors">
  ## コンストラクタ
</div>

<div id="constructor">
  ### コンストラクター
</div>

> **new Evaluation**\<`R`, `E`, `M`>(`parameters`): `Evaluation`\<`R`, `E`, `M`>

定義場所: [src/evaluation.ts:150](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/evaluation.ts#L150)

#### パラメーター

<div id="parameters">
  ##### パラメーター
</div>

`EvaluationParameters`\<`R`, `E`, `M`>

#### 戻り値

`Evaluation`\<`R`, `E`, `M`>

<div id="overrides">
  #### オーバーライド
</div>

[`WeaveObject`](./weaveobject).[`constructor`](./weaveobject#constructor)

<div id="properties">
  ## プロパティ
</div>

<div id="__savedref">
  ### \_\_savedRef
</div>

> `optional` **\_\_savedRef**: [`ObjectRef`](./objectref) | `Promise`\<[`ObjectRef`](./objectref)>

定義場所: [src/weaveObject.ts:71](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/weaveObject.ts#L71)

<div id="inherited-from">
  #### 継承元
</div>

[`WeaveObject`](./weaveobject).[`__savedRef`](./weaveobject#__savedref)

<div id="accessors">
  ## アクセサ
</div>

<div id="description">
  ### description
</div>

<div id="get-signature">
  #### 取得シグネチャ
</div>

> **get** **description**(): `string` | `undefined`

定義場所: [src/weaveObject.ts:98](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/weaveObject.ts#L98)

<div id="returns">
  ##### 戻り値
</div>

`string` | `undefined`

<div id="inherited-from">
  #### 継承元
</div>

[`WeaveObject`](./weaveobject).[`description`](./weaveobject#description)

***

<div id="name">
  ### 名
</div>

<div id="get-signature">
  #### 取得シグネチャ
</div>

> **get** **名**(): `string`

定義場所: [src/weaveObject.ts:94](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/weaveObject.ts#L94)

<div id="returns">
  ##### 戻り値
</div>

`string`

<div id="inherited-from">
  #### 継承元
</div>

[`WeaveObject`](./weaveobject).[`名`](./weaveobject#name)

<div id="methods">
  ## Methods
</div>

<div id="evaluate">
  ### evaluate()
</div>

> **evaluate**(`__namedParameters`): `Promise`\<`Record`\<`string`, `any`>>

定義場所: [src/evaluation.ts:165](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/evaluation.ts#L165)

#### パラメーター

<div id="__namedparameters">
  ##### \_\_namedParameters
</div>

<div id="maxconcurrency">
  ###### maxConcurrency?
</div>

`数値` = `5`

<div id="model">
  ###### モデル
</div>

`WeaveCallable`\<(...`args`) => `Promise`\<`M`>>

<div id="ntrials">
  ###### nTrials?
</div>

`数値` = `1`

#### 戻り値

`Promise`\<`Record`\<`string`, `any`>>

***

<div id="predictandscore">
  ### predictAndScore()
</div>

> **predictAndScore**(`__namedParameters`): `Promise`\<\{ `model_latency`: `number`; `model_output`: `any`; `model_success`: `boolean`; `scores`: \{\[`key`: `string`]: `any`; }; }>

定義場所: [src/evaluation.ts:244](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/evaluation.ts#L244)

#### パラメーター

<div id="__namedparameters">
  ##### \_\_namedParameters
</div>

<div id="columnmapping">
  ###### 列マッピング?
</div>

`ColumnMapping`\<`R`, `E`>

<div id="example">
  ###### 例
</div>

`R`

<div id="model">
  ###### モデル
</div>

`WeaveCallable`\<(...`args`) => `Promise`\<`M`>>

#### 戻り値

`Promise`\<\{ `model_latency`: `number`; `model_output`: `any`; `model_success`: `boolean`; `scores`: \{\[`key`: `string`]: `any`; }; }>

***

<div id="saveattrs">
  ### saveAttrs()
</div>

> **saveAttrs**(): `object`

定義場所: [src/weaveObject.ts:75](https://github.com/wandb/weave/blob/8c5f077eb11c42b84000726ff20504abc728d3fb/sdks/node/src/weaveObject.ts#L75)

#### 戻り値

`object`

<div id="inherited-from">
  #### 継承元
</div>

[`WeaveObject`](./weaveobject).[`saveAttrs`](./weaveobject#saveattrs)