AgentOptimizationEvaluationConfiguration interface

Återanvändbar kvalitetsmätningskonfiguration.

Egenskaper

evaluation_model

Modellkonfiguration som används av modellbaserade utvärderare och konversationssimulering.

evaluators

Utvärderarreferenser som används för att bedöma kandidaters kvalitet.

max_concurrent_agent_runs

Maximalt antal målagent-körningar som körs samtidigt under varje enskild tur-utvärdering. Om den utelämnas går tjänsten till 1. Samtalsutvärdering stöder endast 1.

training_set

Utvärderingsset används för att styra optimeringssökningen. Inline-data stödjer upp till 2 000 testfall när en separat valideringsuppsättning tillhandahålls; annars används den också för validering och är begränsad till 500.

validation_set

Hållna utvärderingsset används för fullständig kandidatutvärdering, begränsad till 500 inline-testfall. Träningsuppsättningen återanvänds och omfattas av samma 500-testfallsvalideringsgräns när den utelämnas.

Egenskapsinformation

evaluation_model

Modellkonfiguration som används av modellbaserade utvärderare och konversationssimulering.

evaluation_model: EvaluationModelConfiguration

Egenskapsvärde

evaluators

Utvärderarreferenser som används för att bedöma kandidaters kvalitet.

evaluators: AgentOptimizationEvaluator[]

Egenskapsvärde

max_concurrent_agent_runs

Maximalt antal målagent-körningar som körs samtidigt under varje enskild tur-utvärdering. Om den utelämnas går tjänsten till 1. Samtalsutvärdering stöder endast 1.

max_concurrent_agent_runs?: number

Egenskapsvärde

number

training_set

Utvärderingsset används för att styra optimeringssökningen. Inline-data stödjer upp till 2 000 testfall när en separat valideringsuppsättning tillhandahålls; annars används den också för validering och är begränsad till 500.

training_set: AgentOptimizationEvaluationSetUnion

Egenskapsvärde

validation_set

Hållna utvärderingsset används för fullständig kandidatutvärdering, begränsad till 500 inline-testfall. Träningsuppsättningen återanvänds och omfattas av samma 500-testfallsvalideringsgräns när den utelämnas.

validation_set?: AgentOptimizationEvaluationSetUnion

Egenskapsvärde