일일 보고서 26-10-02

Об этом предложении

들어가기 앞서 오늘은 개인프로젝트의 주제선정이 완전 종료된 이후 계속 진행하여 중간점검까지 진행하는 과정이였습니다. 주제 전역자 청년정책 가이드 챗봇 중간 점검 한 줄 상태 주제와 현재 상태(순조로움/지연/막힘) 선택 ᄂ 지연 - 수요일 마지막에 수정사항을 받은 뒤 해당하는 정책의 자료들을 찾다 지연0 여태까지 한 내용 / 앞으로 할 내용 체크리스트 완료/진행중/안함(이유) 표시 ᄂ 현재 7단계로 나누고 이후 세부항목으로 나눔 주제 확정 - 정책 주제 선정 → 완료 데이터 구축 - 7가지의 세부항목으로 나눔 온통청년 API 전체 수집 → 완료 서울, 중앙부처 정책 분리 → 완료 1단계 사용 정책 선정 → 완료 군 관련 특례 여부, 개수 확인 → 완료 군 관련 정책 공고문 수집 → 완료 정책 종료, 변경 안내문 수집 → 미진행 충청권, 전국 정책 확장 → 미진행 파싱, 정제, 청킹 - 정책, 문서 파싱, 정제, 청킹 → 완료 특례 규칙 - 전역자 특례 규칙 표 작성 → 완료 임베딩 - 임베딩, 백터 DB 적재 → 완료 평가 - 평가셋 완성 → 진행중 개선 - RAG 성능 비교 → 진행중 데이터 현황 - 수집한 문서와 출처 주요 데이터 수집 - 온통청년 api 이외의 정책과 출처 서울권 공고문 - 서울 특별시, 청년몽땅정보통 등 중앙부처 공고문 - 국토교통부, 한국문화예술위원회 웹페이지 본문 - 청년몽땅정보통 - 서울시, 제대군인지원센터 - 정부24 - 고용복지플러스센터, iMND(중앙부처) 참고 자료 - 온통청년 API 코드정의서 평가셋 문항 수 30 → 정답 20 애매 5 오답 5 정답과 근거 위치 함정문항 등 → 표 참조 숫자 표 GPT 빈손테스트(문서 학습 없이 질문 한 내용) ᄂ 각각 1, 9, 10번 내용 질문(GPT, Gemini) * 1번 둘다 정답 * 9번 둘다 정답 * 10번 GPT → 국토교통부 근거 → 국토교통부를 근거로 들고왔고, 해당 정책 pdf를 제시했지만 안에 전역군인 관련 정책은 없음 gemini 오답 → 서울주거포털 근거 → 서울주거포털이 제시하는 청년월세 정책과 국토교통부가 제시하는 청년월세정책은 엄연히 다름 ᄂ 그래서 질문도 국토교통부를 근거로 제시함 * 고치기 전 RAG ᄂ 첫 평가 결과는 정확 6 / 부분 정확 16 / 오답 8 → 원인을 정리해보니 제 코드에서 전제 확인 지침을 조건문에 빠뜨린 실수, 문화패스 14번의 연도별 기준 누락, 나이 미상 시 판단 통째 생략, 판정 사유 문장 오독, 세부 조건 누락 등이 발견 * 고치고 난 후 RAG ᄂ 정확 23 / 부분 정확 6 / 오답 1 → 오답 유도 문항은 5개 모두 정확 남은 오답 1개와 부분 정확 문항을 확인 오늘 후기 이제 개인프로젝트의 주제를 완전히 선정하고 이제 계속 프로젝트를 개발하며 중간 점검까지의 과정이였습니다. 우선 프로젝트를 선정하고나니 고려해야할 상황이나 수정 사항등 고칠부분과 고려할 부분이 많아 다소 지연되어 현재도 고칠 사항 몇몇이 계속 파악되고 있습니다. 이 부분은 다음주에도 계속 고쳐 중간점검까지 이어가겠습니다.

Детали предложения

Провайдер

velog

Источник

velog-rss

Балл

54.39

Уверенность

49%