네이버, 웹 검색 개선…"양질의 외부 콘텐츠 더 많이 노출"

아시아경제

2017-12-07 17:30:25

외부 콘텐츠 범위 확대에 주력…내년 PDF 분석 솔루션 개발 예정
7일부터 웹문서·사이트 탭 통합…양질 정보·사이트 더 광범위하게 노출



[아시아경제 한진주 기자] 네이버가 외부의 학술 정보 등 유용한 콘텐츠 검색을 원활하게 할 수 있도록 웹문서·사이트 검색 서비스를 개선한다. AI 기술을 활용해 더 유용한 웹문서를 실시간으로 수집하고, 스팸 문서 처리 기술을 고도화한다.

7일 서울 강남구 역삼동 네이버 파트너스퀘어에서 진행된 웹커넥팅데이에서 김상범 네이버 웹검색 리더는 "올해 외부 문서를 잘 검색할 수 있도록 창사 이래 가장 많은 노력을 쏟았다"며 "네이버 검색 결과에 자체 콘텐츠가 많아 '가두리'라는 비판이 있었지만 앞으로는 외부 콘텐츠도 잘 가져오려고 한다"고 설명했다.

지금까지 네이버 검색은 구글 등과 비교해 외부 사이트 웹문서 검색 결과가 제대로 반영되지 않는다는 지적을 받아왔다. 네이버는 AI 기술을 토대로 외부 학술정보를 포함한 양질의 웹문서를 더 많이 노출시키는 데 주력하겠다는 계획이다.

네이버는 전 세계 1조개 링크 중 100억개 가량을 관찰한다. 네이버가 수집하는 정보는 3억개 이상의 도메인, 10억개 이상의 웹사이트다. 이 중 네이버에서 검색할 수 있는 웹사이트 규모는 1000만개다. 웹 상의 방대한 정보를 크롤러가 수집하고, 가치있는 정보를 검색 랭킹에 따라 선별해서 보여준다.

네이버는 학술전문자료나 해외 사이트 검색 강화를 위해 검증된 출처에서 발견된 문서를 수집·분석하는 '화이트 네트워크'를 구축해왔다. 출처가 지닌 가치, 문서 자체의 가치를 조합해서 수집 우선순위를 결정하는 방식이다. 여기에 AI 기술을 더해 더 유용한 학술 자료를 노출하기 위한 기술 개발도 힘쓰기로 했다.

김상범 리더는 "내년 2월 경 PDF 분석 솔루션을 만들어서 PDF 자료 검색을 강화할 것"이라며 "국내 연구소 자료, 페이지, 그래프 여부까지 분석해서 이용자가 자료 찾을 때 '네이버에서도 이런 결과가 나오네'라고 생각하도록 1년 안에 만들겠다"고 강조했다.


검색 품질을 결정짓는 또 한 축은 '스팸 필터링'이다. 네이버는 지난해부터 개발한 '그리핀 프로젝트'를 통해 딥러닝 기술로 스팸 문서를 걸러내고 있다. 스팸 문서들이 자주 쓰는 단어를 학습시켜 관련 문서는 검색 결과에서 제외시키는 것이다. 문서가 어디에 노출되는지, 어떤 사람들이 클릭하는지도 분석해서 스팸 여부를 판단한다.

강성구 네이버 엔지니어는 "전체 수집되는 문서 중 25~30%가 스팸 문서"라며 "앞으로 네이버에서 해당 문서가 가진 정보량을 측정해서 더 좋은 품질의 문서로 판단할 예정"이라고 말했다.

또한 네이버는 7일부터 검색결과에 웹문서·사이트 탭을 통합한다. 기존에 내부 기준에 따라 구분했던 것을 없애고 외부의 읽을만한 정보나 방문할만한 사이트를 더 광범위하게 노출시키겠다는 계획이다. 나아가 웹사이트 관리자들이 더 좋은 검색결과를 보여줄 수 있도록 검색 서비스를 개선할 수 있도록 교육과 가이드도 제공하기로 했다.

김상범 리더는 "기존과 동일하게 사이트나 웹문서는 서브탭에서 확인할 수 있지만 내년 1월에는 통합검색 결과에서 두 탭을 완전히 통합시킬 것"이라며 "사용자의 의도를 기반으로 좋은 검색 결과를 내는 데 중점을 두겠다"고 말했다.


한진주 기자 truepearl@asiae.co.kr
<ⓒ세계를 보는 창 경제를 보는 눈, 아시아경제(www.asiae.co.kr) 무단전재 배포금지>

스토리카드
남자들끼리 밥먹을 때 90%가 다 이렇다
여자들이 사랑받는다는 느낌을 받는 순간 BEST5
왜 매운 음식 먹을 때 쿨피스를 먹는걸까?
모든걸 정리했지만 "그녀"는 놓을 수 없었다.
그들은 어떻게 30대를 받아들이고 있을까?
동화에 숨겨진 소름끼치는 진실
눈높은 남자들의 특징 5
한국인도 제일 많이 틀리는 표준어
피부를 망칠 수 있는 화장품 조합
재채기 할 때 눈물도 함께 나오는 놀라운 이유
절묘한 타이밍에 사진 찍혀 천사가 된 사람들
연인과 헤어지고 빨리 내 자리로 돌아가는 방법
뮤직비디오 아역으로 데뷔해 비주얼 깡패된 3인
내 최애가 성전환을 한다면?
댕댕이 있는 집에서 화장실가면 생기는일
집안 곳곳에 벤 정체 모를 냄새 없애는 법
여자와의 첫 데이트때 절대 하지 말아야할 행동
다이어트 성공한 식단이 다름아닌 맥도날드
1300만 원에 낙찰된 그림 두르고 다니는 솔비
아이유가 직접 밝힌 사진 속 `어깨 위 손의 정체`
회식자리에서 쓰면 주목받는 건배사
소식하면 진짜로 오래 살까
SNS 사진으로 우울증세를 알 수 있다고?
마그네슘 부족인 줄 알았던 "눈 밑 떨림", 위험신호라고?
최근 밝혀진 밀당남녀가 더 오래가는 이유!
세상에서 가장 멋진 서점은 바로여기
음식 맛깔나게 나오게 하는 방법 BEST 6
평생 살면서 꼭 가봐야 할 시계탑
살찐다고 했던 음식이 알고보니 아니었다 !
콧물은 어디서 자꾸 나오는 걸까?
인기콘텐츠
DB손해보험 운전자보험, 상담시 상품권 증정
40대女 주름 사라져! 최근 방송에도 나온 '이것'
금주 로또1등 예상번호 "1,26,29,..."

핫포토
실시간 베스트
  • 1그 때, 어떤 옷을 입고 있었니?
  • 2'연애의 맛 김종민♥' 황미나 누구? 미녀 기상캐스터
  • 3MLB.com "한국 추석날, 류현진이 모든 것을 했다"
  • 4폼페이오 "美·中 무역전쟁 우리가 이긴다"
  • 5올 추석 밥상 최고 메뉴?...문재인·김정은 남북정상회담
  • 6천상의 소리, 유튜브 900만 조회수! 제주소년 오연준의 바람의 빛깔
  • 7스타 작가들의 놀라운 과거 직업
  • 8유키스 동호 "성격 차로 합의이혼…아이 양육에 힘쓰겠다"
  • 9김문환, 프리허그 이벤트 마련.. "팬들의 사랑 보답하고파"
  • 10래리 핑크 블랙록 CEO "무역전쟁, 장기적으로 美에 피해" 경고
  • 11같은 민족, 다른 ‘산림용어’…남북 산림용어 통일작업 추진
  • 12이재용vs지코, 둘 중 최고 인싸는 누구? 평양행 전용기 안 대공개!
  • 13다른 사람 아냐? 할리우드 배우의 변신
  • 14개그우먼 박미선 측 "추돌사고 가해차량, 음주운전 아닌 딴짓 하다가 사고"
  • 15신지애, 세계골프역사박물관에 우승복 등 애장품 기증
  • 16달러, 파운드 강세 속에 하락...달러 인덱스 0.7%↓
  • 17조양호 16시간 조사 후 귀가…檢 구속영장 청구할까
  • 18천상의 소리, 유튜브 900만 조회수! 제주소년 오연준의 바람의 빛깔
  • 19핫한 운동선수의 여친들
  • 20'진짜사나이300' 블랙핑크 리사, 女 도전자 중 혼자만 '뽀송'…"땀이 안 나"
  • 212018 KBO 퓨처스리그 종료..북부 경찰 8년·남부 상무 7년 연속 우승
  • 22말레이시아 반부패위, 수천억 횡령 혐의 나집 전 총리 다시 체포
  • 23'미투 첫 실형' 이윤택 징역 6년 선고…"피해자들 더 용기 내길"
  • 24드디어 떴다! 여성 히어로 주연 '캡틴 마블' 예고편
  • 25집에서 세탁소처럼 깨끗하게 세탁하는 방법