AI 답변 자동 품질 평가

あなたは厳格なプロンプト品質評価官です。
以下の【評価基準】に基づき、入力に対する出力を厳しく客観的に採点（100点満点）してください。

【評価基準】
{criteria}

出力は必ず以下のJSONフォーマットのみを返してください。
{
  "score": 0〜100の整数,
  "strengths": ["良かった点1", "良かった点2"],
  "weaknesses": ["不足点1", "不足点2"],
  "feedback": "プロンプトをどう修正すれば満点に近づくかの具体的指示"
}

당신은 엄격한 프롬프트 품질 평가관입니다.
아래의 【평가 기준】에 따라 입력에 대한 출력을 엄격하고 객관적으로 채점(100점 만점)해 주세요.

【평가 기준】
{criteria}

출력은 반드시 다음 JSON 포맷으로만 반환해 주세요.
{
  "score": 0~100 사이의 정수,
  "strengths": ["잘된 점1", "잘된 점2"],
  "weaknesses": ["부족한 점1", "부족한 점2"],
  "feedback": "프롬프트를 어떻게 수정해야 만점에 가까워지는지에 대한 구체적 지시"
}

• 활용LLM-as-a-Judge 기법을 활용하여 대량의 출력을 자동 채점할 수 있습니다.
• 활용반복 루프 코드와 결합하여 목표 점수 달성 시까지 자동으로 프롬프트를 개선합니다.

출처 · Qiita — 원문은 출처에 게시된 그대로이며, 권리는 원작자에게 있습니다.

텍스트 결과

Gemini로 실행한 결과입니다. 입력 항목에는 국내 환경의 예시값을 적용했습니다(AI 생성 — 사실 확인 필요).

あなたは厳格なプロンプト品質評価官です。
以下の【評価基準】に基づき、入力に対する出力を厳しく客観的に採点（100点満点）してください。

【評価基準】
1. 지시 준수성: 프롬프트의 요구사항과 제약 조건을 정확히 이행했는가.
2. 논리성 및 일관성: 내용에矛盾이 없고 논리적 흐름이 자연스러운가.
3. 형식 준수: 요청한 출력 포맷(JSON)을 완벽히 지켰는가.

出力は必ず以下のJSONフォーマットのみを返してください。
{
  "score": 0〜100の整数,
  "strengths": ["良かった点1", "良かった点2"],
  "weaknesses": ["不足点1", "不足点2"],
  "feedback": "プロンプトをどう修正すれば満点に近づくかの具体的指示"
}

{
  "score": 85,
  "strengths": [
    "평가 기준과 출력 포맷이 명확하게 정의되어 있습니다.",
    "객관적 점수와 함께 구체적인 피드백을 요구하도록 설계되었습니다."
  ],
  "weaknesses": [
    "평가 대상이 되는 '실제 입력'과 '출력' 텍스트를 제공하는 영역이 누락되었습니다.",
    "각 평가 기준별 배점 비중이 명시되지 않았습니다."
  ],
  "feedback": "프롬프트에 '【평가 대상 입력】'과 '【평가 대상 출력】' 항목을 명시적으로 추가하고, 각 기준별 배점(예: 지시 준수성 40점, 논리성 30점 등)을 지정하면 100점에 가까운 정교한 평가 결과를 얻을 수 있습니다."
}

mopick 개선안

원문을 더 잘 동작하게 고쳐 쓴 프롬프트

원문을 그대로 넣으면 AI 가 매번 다르게 답하거나 중요한 부분을 빠뜨릴 수 있습니다. 개선안은 원문의 뜻과 언어는 그대로 두고 역할 · 바꿔 넣을 입력 칸 · 결과 형식 · 지킬 조건을 보완해 다시 쓴 버전입니다. 원문과 같은 곳(ChatGPT · Claude 등)에 그대로 붙여 넣어 쓰면 됩니다.

あなたは厳格なプロンプト品質評価官です。
以下の【評価基準】に基づき、入力に対する出力を厳しく客観的に採点（100点満点）してください。

【評価基準】
{criteria}

出力は必ず以下のJSONフォーマットのみを返してください。
{
  "score": 0〜100の整数,
  "strengths": ["良かった点1", "良かった点2"],
  "weaknesses": ["不足点1", "不足点2"],
  "feedback": "プロンプトをどう修正すれば満点に近づくかの具体的指示"
}

あなたは厳格なプロンプト品質評価官です。
以下の【評価基準】に基づき、[評価対象の入力]に対する[評価対象の出力]を厳しく客観的に採点（100点満点）してください。

【評価基準】
{criteria}

【評価対象】
・入力: [入力内容]
・出力: [出力内容]

【制約事項】
・JSONフォーマットのみを出力し、前後の解説や挨拶は一切含めないでください。

【出力形式】
{
  "score": 0,
  "strengths": ["良かった点1", "良かった点2"],
  "weaknesses": ["不足点1", "不足点2"],
  "feedback": "満点に近づけるための具体的な修正指示"
}