운영 활용 예시

함수 호출용 LLM API

영업 도우미가 계정을 조회하고 견적을 계산하고 주문 초안을 만듭니다. 먼저 lookup_account, 다음 calculate_quote를 호출합니다. 담당자가 정확한 초안을 확인하기 전에는 create_order를 쓸 수 없습니다.

LLM 응답과 앱 동작을 연결하는 검증된 함수 호출
함수 호출용 LLM API

운영 구현 예시

API·기본 모델·대체 설정

운영 모델 선택추천이유
APIPOST /v1/chat/completionsOpenAI 호환 서버 요청
기본 모델gpt-5.6-terra안정적인 도구 선택과 다단계 인수 구성은 Terra를 기본으로 씁니다. 매번 최상위 모델을 쓸 필요는 없습니다.
대체 모델gpt-5.5도구 스키마 동작을 확인한 뒤 단일 도구 읽기 전용 요청에는 gpt-5.5를 쓰세요. 여러 도구가 의존하는 모호한 계획은 Sol로 넘기세요.
고난도 작업용 상위 모델gpt-5.6-sol기본 경로가 정한 품질·복잡도 기준을 못 맞출 때만 사용
출력 규칙검증된 도구 호출검증된 도구 호출 뒤 견적 초안을 반환합니다. 확인 전에 외부 주문을 생성하지 않습니다.
01
사용 상황

운영 앱의 함수 호출

영업 도우미가 계정을 조회하고 견적을 계산하고 주문 초안을 만듭니다. 먼저 lookup_account, 다음 calculate_quote를 호출합니다. 담당자가 정확한 초안을 확인하기 전에는 create_order를 쓸 수 없습니다.

모델은 도구 호출을 제안하고 앱은 실행 전에 스키마·권한·상태를 검증합니다. 도구 오류는 구조화된 결과로 반환하며 같은 잘못된 호출을 반복하지 않습니다.

02
구조

함수 호출 처리 흐름

  • 현재 상태에서 허용된 도구만 제공.
  • 모델이 도구·인수를 제안.
  • 앱 코드에서 모든 인수·권한 검증.
  • 쓰기 작업은 중복 방지 키로 실행.
  • 구조화된 결과를 반환하고 정해진 종료 조건까지 진행.
03
API 요청

LLMFly AI로 gpt-5.6-terra 호출

서버에서 요청하세요. 예시 내용과 임시 도구 스키마를 앱의 데이터·도구로 바꾸세요.

request.example
curl https://app.llmfly.ai/v1/chat/completions \
  -H "Authorization: Bearer $LLMFLY_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "gpt-5.6-terra",
    "messages": [
      {"role": "system", "content": "Use the available tools to prepare a quote. Never create an order until the user confirms the exact draft. Do not invent account IDs or prices."},
      {"role": "user", "content": "Prepare a quote for 25 seats for Acme's current plan."}
    ],
    "tools": [{"type": "function", "function": {"name": "YOUR_TOOL", "description": "Replace with the tool contract for this workflow", "parameters": {"type": "object", "properties": {}, "additionalProperties": false}}}]
  }'
04
모델 선택

gpt-5.6-terra를 기본 모델로 고른 이유

안정적인 도구 선택과 다단계 인수 구성은 Terra를 기본으로 씁니다. 매번 최상위 모델을 쓸 필요는 없습니다.

도구 스키마 동작을 확인한 뒤 단일 도구 읽기 전용 요청에는 gpt-5.5를 쓰세요. 여러 도구가 의존하는 모호한 계획은 Sol로 넘기세요.

05
합격 기준

함수 호출 합격 기준

지표합격 조건
올바른 도구 선택 비율필요한 도구를 호출하고 불필요하면 호출하지 않음
유효한 인수 비율인수가 스키마·범위·ID·권한 검증을 통과
도구 오류 복구복구 가능한 오류에는 호출을 수정하고 같은 호출을 반복하지 않음
안전하지 않은 호출 비율중요 작업 도구는 필요한 권한·확인 없이 실행하지 않음
06
실패 처리

배포 전 처리할 오류

  • 검증하지 않은 인수 실행
  • 같은 잘못된 호출 반복
  • 서로 겹치는 도구 설명 사용
  • 텍스트로 권한을 우회하게 둠
07
출력

출력·실행 기록

검증된 도구 호출 뒤 견적 초안을 반환합니다. 확인 전에 외부 주문을 생성하지 않습니다.

운영 실행마다 모델 ID, 요청 ID, 토큰 사용량, 재시도, 검증 결과와 최종 처리를 기록하세요.

자주 묻는 질문

어떤 지표를 먼저 확인하나요?

인수 세부 사항보다 먼저 올바른 도구를 골랐는지, 필요 없을 때 호출하지 않았는지 확인하세요.

도구 인수를 믿어도 되나요?

아니요. 타입·필수 필드·범위·ID·권한을 검증하세요.

도구 오류는 어떻게 반환하나요?

짧은 구조화 오류를 반환하고 비밀 정보·내부 추적 정보는 노출하지 마세요.

내 입력으로 구성 시험

같은 요청, 도구와 검증 규칙으로 기본·대체 모델을 비교하세요.

모델 비교하기