3. Perplexity AI Agent를 통해 보험계리 문제 풀이

서론

안녕하세요, AI 차앙미니입니다. 오늘은 ChatGPT를 통해 LLM AI Agent를 준비하는 과정에서 전 포스트에서 챗지피티에 대용량 PDF를 참고하게 시킨 결과와, 다른 경로를 사용한 결과를 말씀드리도록 하겠습니다. 
 

본론

전 포스트에서 Chat-gpt 4o에게 pdf를 참고하게 보여준 결과, 전처리과정 결과를 제출받아보았을때, pdf의 극초반의 내용에 대한 데이터 전처리 내용만이 들어가있었습니다. 489페이지나 되는 pdf를 처리하다보니 이와 같은 오류가 생긴 것 같습니다.
 
그리하여 PDF를 읽어들이고, OpenAI의 ChatGPT, Anthropic의 Claude 등을 활용해 출처 주석과 함께 질문에 대한 답변을 제공하는 Perplexity를 사용해보려 합니다.
 

IFRS17보험회계해설서를 첨부파일로 읽어들일 수 있습니다.

 

적합한 질문생성 (feat. ChatGPT 4o)

위와 같이 IFRS17 보험회계해설서를 첨부파일로 제공하였습니다. 
 
IFRS17보험회계해설서_2022.pdf 의 128 페이지에 보면 보험 포트폴리오에 대한 내용이 아래와 같이 있습니다. 이에 대한 질문을 Perplexity에게 해보도록 하겠습니다. 

 

질문하기

위 테이블에서, 아래와 같은 정보가 중요하다 판단되어, 아래와 같은 답변들 하는지 물어보도록 하겠습니다.

1. (질문) 포트폴리오는 계약들의 어떤 기준으로 구성되어있어?
   • (예상답변) 포트폴리오는 유사한 위험에 노출되어 있고 함께 관리되는 계약으로 구성된다.
2. (질문) 보험 포트폴리오 관점에서, 재보험의 포트폴리오는 재보험계약에 속한 원수보험계약이 단일 포트폴리오로 구성되지 않은 경우 는 어떻게 재보험계약의 포트폴리오를 구분해? 
   • (예상답변) 재보험의 포트폴리오는 재보험계약에 속한 원수보험계약이 단일 포트폴리오로 구성되지 않은 경우 재보험계약이 담보하는 주요한 위험에 따라 재보험계약의 포트폴리오를 구분한다.
3. (질문) 보험 계약 포트폴리오의 구분을 보았을때, 감독회계에서 제시한 포트폴리오 구분 중 생명보험의 포트폴리오 구분은 어떻게 이뤄져있는지, 상세하게 리스트와 세부구분 내용들을 놓치지 않고 적어줘.
   • (예상답변) 유사위험- 단일집함 // 사망 - 유,무배당, 변액 // 건강 - 유,무배당, 변액  // 연금 및 저축 - 유,무배당, 변액, 자산연계 // 기타 - 유,무배당, 변액 

 
위 질문들을 질문할 때, "내가 제공한 "IFRS17보험회계해설서_2022.pdf" 만을 참고하여 답변하고, 정확한 출처의 직접인용문을 함께 제공해줘." 라는 말을 덧붙여 pdf만을 참고하여 정확한 인용문을 제공하며 답변하도록 가이드 하였습니다. 
 

1. 포트폴리오는 계약들의 어떤 기준으로 구성되어있어?

(예상답변) 포트폴리오는 유사한 위험에 노출되어 있고 함께 관리되는 계약으로 구성된다.
(실제답변)

 

---> 예상답변과 일치

 
 

2. 보험 포트폴리오 관점에서, 재보험의 포트폴리오는 재보험계약에 속한 원수보험계약이 단일 포트폴리오로 구성되지 않은 경우 는 어떻게 재보험계약의 포트폴리오를 구분해? 

(예상답변) 재보험의 포트폴리오는 재보험계약에 속한 원수보험계약이 단일 포트폴리오로 구성되지 않은 경우 재보험계약이 담보하는 주요한 위험에 따라 재보험계약의 포트폴리오를 구분한다.
(실제답변)

---> 예상답변과 일치

 

3. 보험 계약 포트폴리오의 구분을 보았을때, 감독회계에서 제시한 포트폴리오 구분 중 생명보험의 포트폴리오 구분은 어떻게 이뤄져있는지, 상세하게 리스트와 세부구분 내용들을 놓치지 않고 적어줘. 

(예상답변) 유사위험- 단일집함 // 사망 - 유,무배당, 변액 // 건강 - 유,무배당, 변액  // 연금 및 저축 - 유,무배당, 변액, 자산연계 // 기타 - 유,무배당, 변액

(실제답변)

 

---> 예상답변과 불일치 (아래 표 참고)

위 3번 질문은 "Perplexity AI가 표를 잘 이해하는가"를 테스트하기 위한 질문이었는데, 아래 부분들을 놓치는 걸 확인하였습니다.

• 유사위험 구분
• 단일집합/배당/무배당/변액 등 세부 구분

 

재질문

같은 질문을 Chat-GPT 4o에 동일하게 질문하보았습니다.

 

 

---> 예상답변과 일치

 

결론

• Perplexity AI로 간단한 질문들을 Text기반의 정보를 추출하여 답변하는 것은 훌륭하였음 
• 하지만 표 형태로 되어있는 데이터를 추출하여 답변하는 것은 놓치는 부분이 많았음
• chat-gpt 4o가 표에서 정보를 추출하여 제공하는 답변이 더 뛰어났음

 
감사합니다.

 

차앙미니의 다른글 참고하기

계리 AI

6. 한국 보험 계리사 계리 업무 실무 AI 활용 인공지능 PDF 문서 RAG AI 챗GPT (Feat. Cursor, OpenAI, Pinecone,

GPT 4o 

4. 신규 발행된 OpenAI의 GPT-4o 활용해보기!