안녕하세요 직리니서처 개발자입니다. 본 사이트 이용에 참고하셔야 될 점을 알려드립니다.
후기 수집 시점
후기 수집 시점은 각 과정 종강일 기준 14일 이후에 후기를 수집합니다. 일반적으로 7일 이내에 후기가 대부분 완료될 것으로 예상하여 14일로 정하였습니다. 종강일 기준 14일 이후에 작성된 혹은 수정된 후기는 현재 수집되고 있지 않습니다. 지속적으로 관찰하여 필요 시 후기 최신화와 관련된 기능 업데이트를 계획하겠습니다.
(중요!) 강사명 추출(AI 분석의 한계)
후기를 수집한 이후에 AI 분석을 통해 이름을 추출합니다(Amazon Comprehend 활용). 이 후 적절한 필터링 과정 이후 출력되게 됩니다. 후기를 기준으로 이름 추출하고 통계를 내기 때문에 활용 시 몇몇 주의 사항이 있습니다.
- 검색되는 이름에 강사가 아닌 학원 관계자(행정직원 등)가 포함될 수 있습니다.
- 한 학원에 동명이인이 존재할 경우 한명으로 간주 됩니다.
- 강사가 다른 학원으로 이동 시 다른 인물로 간주 됩니다. (예를 들어 강사 홍길동이 A학원과 B학원에서 강의를 진행하여 후기에 강사명이 언급될 시 따로 검색 됩니다.)
- 간혹 이름에 '은/는/이/가/인' 혹은 그에 준하는 글자로 끝나는 경우 AI가 가끔 혼동을 초래 합니다. (예를들어 '홍길은'이라는 강사명이 후기에 언급될 시 AI는 몇몇 경우 '홍길'로 이름을 인지 합니다. 이때 A학원의 '홍길은' 강사는 '홍길은'과 '홍길' 강사로 분리되는 경우가 존재 합니다.)
- 간혹 이상한 이름이 등장 할 수 있습니다.
※주의사항1
후기 내용을 통해 분석하기 때문에 추출된 강사는 현직 강사분들 중에 50%채 안될 것이라고 예상합니다. 실제로 제가 재직중인 학원에서도 60%정도 확인이 되었습니다. 다만, 후기에 수강생 분들이 강사명을 언급하는 경우 매우 높은 확률로 상당히 좋은 평가라는 것이 확인 되었음에 따라 흔히 얘기하는 '에이스 강사'분들은 대부분 확인 될 것입니다.
※주의사항2
강사명 검색이 안된다고해서 안 좋은 강사분은 아닙니다. 각 학원에서 조용히 그리고 묵묵히 일하고 계신 강사님들도 많이 계십니다. 제가 소속된 학원에서도 후기에 언급이 안되었지만 정말 열심히 잘하시는 강사님도 계십니다(너무 잘하시지만 사실 조금 무뚝뚝하셔서 학생분들이 애정을 가지고 이름을 언급하지 않는 정도입니다). 본 사이트는 참고로 활용하시고 필요시 각 학원을 통해 알아보시기 바랍니다.
강사 검색 제한
제가 처음 강의를 할때를 생각합니다. 첫 강의 였기때문에 상당히 불안불안했고, 지금 생각해보면 너무 어설펐던것 같습니다. 그 당시 학생분들에게 너무 죄송하네요. 그리고 경우에 따라선 강사 개인의 문제가 아닌 외부 문제로 인해서 평가가 떨어지는 경우도 있습니다. 이와 같은 경우를 고려하여 강사분들 보호 차원에서 평가가 좋은 강사분들만 검색에서 출력되게 하였습니다. 이에 따라 현재 강사는 평점 4.5, 강사명 언급 2회, 후기 10회, 후기 긍정 65% 이상 모두 만족하는 분들만 검색 가능합니다(전체 대비 25%).
※주의사항
전체 대비 25%가 상위 25%를 뜻하는 것은 아닙니다. 강사명 언급 2회 이상 조건에서 상당 수 필터링 되었습니다. 지속적으로 관찰 이후 조절 예정입니다.
후기 AI 분석 결과에 대해
AI '감정 분석' 알고리즘을 사용하였기때문에 몇몇 경우 긍정 후기를 부정 후기로 판단하는 경우가 존재합니다. 예를 들어 '없습니다'라는 후기는 '불만이 없습니다'라는 의도로 적었을 가능성이 있습니다만, 감정 분석이기 때문에 부정으로 판단합니다. 하나의 예를 더 들어보죠.
'X월X일부터 XXX선생님과 처음부터 수업 듣는 학생들은 로또 맞은거다 솔직히 다음기수 학생들이 너무 부럽다 다시 수강한다면 XXX선생님과 처음부터 같이 듣고 싶다 XXX 선생님에게 수업들을 수 있었던 나는 행운아였다 수업 들어보면 내가 왜 이런말을 하는지 이해할 것이다!'
위와 같은 후기는 상당히 긍정적인 후기 입니다만, 감정 분석 기준으로는 부정으로 인지하였습니다. AI가 공격적인 말투로 이해했을까요? 글쎄요. 이젠 사람이 AI를 이해할수 없는 상황에 도달했죠. 물론 99% 부정은 아녔습니다.
몇몇 경우 우리가 인지하는 경우와 다르게 AI가 판단을 하는 경우가 있지만, 다행히 통계적으로는 유의미한 결과를 도출하였습니다.
학원 순위 산정 기준
(2023-04-16 기준)
순위 점수 높은 순
순위 점수 = (5점만점평점 X 20) + (강의수 X 0.5)
단, 강의 수가 20회 이상인 경우 추가 점수를 부여하지 않는다.
산정 근거
평점만을 순서로 진행하면 1회 5.00점이 학원이 항상 1등을 하게되어, 어느정도 강의 수가 확보되어 통계적으로 유의미한 점수가 나온 학원을 위로 올라가게 하였습니다.
문제 확인
위 산정 기준 역시 몇몇 경우 의아한 순위 도출이 되는 경우를 발견하였습니다. 예를들어 강의 횟수 20에 평점 5.00점 그런데 후기가 단 한줄도 없는 경우(??) 등
향후 사용자 데이터(담기, 보기) 확보 이후 평점, 강의 수, 담기, 보기, AI 추천 등 다양한 관점에서 점수 가중치를 주어 순위를 산정할 예정입니다.(최우선 순위 업데이트 예정)
※주의사항
학원 순위가 어느정도는 사용자분들에게 도움이 될 수 있겠지만, 후기 확인 및 개인의 가치관으로 결정하시길 바랍니다.
강사 순위 산정 기준
(2023-04-16 기준)
순위 점수 높은 순
순위 점수 = (5점만점평점 X 10) + (언급 수 X 0.1) + (AI 긍정 / 20) + (강의 수 X 1)
단, 강의 수가 5회 이상인 경우 추가 점수를 부여하지 않는다.
산정 근거
다년간 저와 제가 소속된 학원 및 다른 학원 후기들을 지속적으로 관찰해온 결과, 강사의 경우 고려해야 될 사항들이 많았습니다. 처음부터 혼자 강의를 진행하는 경우와 중간에 강사가 교체되는 경우가 존재한다는 점, 교체되는 경우 강의 점수를 나눠갖는다는 점, 같은 상위 점수이지만 사실 상 후기 내용에 차이가 많이 날 수 있다는 점, 특히 후기에 강사명 입력하는 경우 상당한 애정을 가지고 후기를 작성한다는 점 등을 고려해 강사명 언습 수에 점수 가중치를 조금 더 주었습니다.
문제 확인
현재 한 개의 후기에 강사명이 여러번 언급될 경우 여러번 카운팅합니다. 향후 악용될 여지가 있기때문에 주의 깊에 관찰하여 변경 예정이며, 또한 지속적으로 산정 기준을 강화할 예정입니다.
※주의사항
학원과 마찬가지고 강사 순위 역시 어느정도는 사용자분들에게 도움이 될 수 있겠지만, 후기 확인 및 개인의 가치관으로 결정하시길 바랍니다.
알려진 문제점
확인되는대로 지속적으로 정리하겠습니다.
