한글 단어 유사도 측정

한글 단어 유사도 측정

  1. 음절을 음소로 나눠서 비교 (ex: 정승현 -> ㅈㅓㅇㅅㅡㅇㅎㅕㄴ)
  2. 초성에는 가산점 (ex: 정승현 -> ㅈㅓ@ㅇㅅ@ㅡㅇㅎ@ㅕㄴ)
    (참고 자료: 한글_edit_distance.pd)

한글 문장 형태소 기반 비교

  1. 형태소 기반은 큰 의미가 없음.
  2. 일단 딜이나 옵션의 제목은 그 특성상 명사 외의 형태소를 쓰는 경우가 드물기 때문.
    1. 옴파로스 겨울 신상
    2. 더마시오 옛날 통닭
  3. 브랜드나 상품의 특징을 나타내는 고유 명사가 아닌 이상 정확도가 매우 떨어짐.
    1. 위의 예에서 "겨울", "신상", "옛날", "통닭" 등의 단어는 큰 의미가 없음. "옴파로스", "더마시오"와 같은 단어가 결정적인 단어임.
    2. 하지만 일반 명사가 필요 없는 것은 아님. "나이키 운동화"와 "나이키 패딩"은 구분해야하기 때문.

비교 수단

  1. 상품코드 (Optional)
    1. 제목에서 찾아야함.
      1. MTM-N포인트 올리브:2XL
      2. MTM-69 블랙:2XL
      3. BTS3211M_RED-100
      4. J1000MREBKS-100
      5. 10030BNAS-105
      6. Z34193-95
      7. TR01BKP-110
      8. K41-O-722_베이지/M
      9. PK-301CC (Black)
      10. 424TF-L424-ST 245
      11. SHD-FR130BT
      12. 644869-601(GS)
      13. 16. [MEN] 브이넥 스웨터 #42330186 / 그레이 헤더 S
      14. 선택32)캐시어하이넥N669 / 차콜(Charcoal)
      15. 선택 13 폴로 걸즈 럭비 드레스 / 13-1 Fuchsia-5
      16. 선택 7 타미 힐피거 여성 스웨터 / 7-2 Heather Grey-M
      17. 선택2. 3-5세/주황-M1411002
      18. 선택6) 얼스프렌들리 유아섬유세제 1,500ml
      19. 선택4)[오후출발]4박5일-아동399000원 / 03월 03일 화요일
      20. 02_밀키드레스 필굿 코튼 15sheet x 2
      21. 선택6)간식용품 / 6-18. 논슬립 양손 이유볼-옐로우
  2. 위치 정보 (Optional)
    1. API에서 제공.
  3. 브랜드 or 회사 정보 (Optional)
    1. API에서 제공
    2. 제목에서 찾기
  4. 카테고리 정보
    1. 전혀 다른 카테고리는 비교 대상에서 제외
  5. 딜 및 옵션 제목 유사도

비교 수단별 특징

  1. 상품코드 (Optional)
    1. 같은 상품일 확률 매우 높음. 결정적임.
    2. 숫자 하나만 달라도 다른 상품이기 때문에 유사도 점수가 아닌 Boolean 결과 리턴
  2. 위치 정보 (Optional)
    1. 같은 상품일 확률 높음.
    2. 로컬에선 결정적임.
    3. 조금 달라도 같은 상품일 확률이 높음. 일정 범위 안에 있는 지 확인.
  3. 브랜드 or 회사 정보 (Optional)
    1. 같은 상품일 확률 높은 편이지만 결정적이진 않음.
  4. 카테고리 정보
    1. 같은 상품일 확률을 조금 좁여 줌.
    2. 대신 다를 경우는 다를 확률이 매우 높음.
  5. 딜 및 옵션 제목 유사도
    1. 최후의 수단

댓글

  1. Unknown2017년 4월 28일 오후 8:47

    안녕하세요~ 혹시 메일 주소를 를 좀 알수 있을까요?

    저에게 메일좀 보내주시면 개발관련 이야기를 나누고 싶어요 ~ ^^ 감사합니다.

    답글삭제

댓글 쓰기

이 블로그의 인기 게시물

DBCP2

이미지
Parameter Description username The connection username to be passed to our JDBC driver to establish a connection. password The connection password to be passed to our JDBC driver to establish a connection. url The connection URL to be passed to our JDBC driver to establish a connection. driverClassName The fully qualified Java class name of the JDBC driver to be used. connectionProperties The connection properties that will be sent to our JDBC driver when establishing new connections. Format of the string must be [propertyName=property;]* NOTE  - The "user" and "password" properties will be passed explicitly, so they do not need to be included here. Parameter Default Description defaultAutoCommit driver default The default auto-commit state of connections created by this pool. If not set then the setAutoCommit method will not be called. defaultReadOnly driver default The default read-only state of connections created by this pool. If not set then the
자세한 내용 보기

내부망에서 SBT 사용법

이미지
내부망에서 SBT 사용시 프록시 저장소 설정 ~/.sbt/ 경로에 repositories 파일 생성 후 아래와 같이 저장소 정보 추가 [repositories]    local    my-ivy-proxy-releases: http: //maven.your-domain.net/nexus/content/groups/public/, [organization]/[module]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext]    my-maven-proxy-releases: http: //maven.your-domain.net/nexus/content/groups/public/ Check out from Version Control > Git Git 저장소 주소를 입력한 후 Clone 클릭 build.sbt 열겠냐고 물어보면 Yes 클릭 VM parameter의 XX:MaxPermSize=384M 부분은 지워주시고(Java8은 Perm 설정이 필요 없음) 아래 옵션을 추가합니다. -Dsbt.override.build.repos= true 위 옵션을 sbt 설치 경로의 conf/sbtconfig.txt 파일에 넣어주는 방법도 있으니 참고만 하세요. 다 끝나셨으면 OK 클릭.
자세한 내용 보기

groupadd

그룹 추가 - groupadd groupadd 명령어로 생성되는 그룹은 특별한 옵션이 주어지지 않는 한 GID는 499 까지는 할당되지 않는다. 즉, GID 가 500 이상인 그룹들 가운데 가장 낮은 GID 번호로 그룹을 생성하게 된다( -r 옵션 사용시에는 예외). groupadd teamzezz 아무 옵션없이 새로운 그룹을 생성하면 기존에 있던 그룹의 마지막 번호 다음번호를 GID 로 할당하여 teamzezz 라는 그룹이 생성된다. grep teamzezz /etc/group teamzezz:x: 501 : 특정 GID를 할당하여 그룹을 생성 groupadd -g 1000 admin 이후부터 추가되는 그룹은 GID 가 1001 로 지정된다. 항상 가장 마지막 GID 다음 번호로 할당됨을 유념하자. tail -f /etc/group ... (중략) nestgoer:x: 500 : teamzezz:x: 501 : admin:x: 1000 : 시스템용 그룹 (GID 499 이하)을 생성 groupadd -r sysadmin 위와 같이 -r 옵션을 사용하면 0 번 부터 499 까지의 할당되어 있지 않은 GID 중 가장 높은 번호를 할당해 준다. 그룹 삭제 - groupdel groupdel sysadmin 그룹 확인 - groups groups nestgoer wheel 그룹 관리 - gpasswd 리눅스 시스템을 사용하는 주체는 두가지로 볼 수 있는데 그것은 사용자이거나 그룹이다. 특정 그룹에 사용자를 추가하거나 제거하고 특정 그룹에 패스워드를 설정하는 작업은 gpasswd를 이용한다. gpasswd 옵션 -a user : 특정 그룹에 새로운 그룹멤버를 추가함. -d user : 특정 그룹에서 지정한 그룹멤버를 제거함. -r : 특정 그룹의 패스워드를 제거함 -R : 특정 그룹에 접근을 제한함 -A user, ... : 특정 그룹의 그룹관리자를 설정함 -M
자세한 내용 보기