잉크토미

잉크토미의 로고
잉크토미(Inktomi)는 미국의 웹 검색 결과 제공 및 인터넷 관련 솔루션 제공 업체이다.

역사

초창기

1994년에 UC 버클리에서 시작한 슈퍼컴퓨터 개선 프로젝트 NOW가 잉크토미의 시작에 큰 영향을 줬다. 당시 슈퍼컴퓨터는 여러 개의 컴퓨터를 병렬로 연결해서 성능을 내기보다는 고성능을 낼 수 있도록 특별히 설계된 한 개의 컴퓨터를 사용했다. 이 방식은 이후 급격히 증가할 트래픽을 처리하는데 있어 거대한 비용 문제 및 비효율을 유발할 것으로 예상되었고, NOW 프로젝트는 폭증하는 트래픽과 기술의 발전에 유연하게 대처할 수 있는, 확장하기 쉬운 슈퍼컴퓨터를 만들기 위해 병렬 컴퓨팅을 적극적으로 활용하는 프로젝트였다. 당시 슈퍼컴퓨터를 만드는 연구를 진행하고 있었던 UC 버클리의 교수 에릭 브루어와 대학원생들이 이 프로젝트의 영향을 받아 병렬 컴퓨팅을 이용한 슈퍼컴퓨터를 완성했다. 이 슈퍼컴퓨터에 돌릴 프로그램으로 대학원생의 프로젝트에 기반을 둔 검색엔진을 선택했고, 1995년 9월 26일에 결과물을 공개했다. 이 검색엔진이 잉크토미의 기반이 되었다.[4][5]

초기에는 정부의 지원도 받았지만, 1996년 2월에 상업화됐다. 상업화를 막 했던 당시 130만 개 이상의 웹문서를 보유한, 제법 큰 규모의 데이터베이스를 보유한 검색 엔진 업체였고, 속도도 (당시 기준으로) 인상적이었다. 잉크토미는 인포시크, 라이코스, 익사이트 등 당시 비슷한 시기에 시작한 다른 검색엔진이 선택한, '자체적인 포털 사이트를 연 후, 사업 분야 확장을 통해 증가하는 페이지뷰를 이용해 수익을 얻는 전략' 대신 '다른 포털 사이트에 자신의 검색 결과를 판매하여 수익을 얻는 전략'을 선택하여 포털 사이트들과의 갈등을 피하는 방향으로 운영된다. 잉크토미는 1996년 5월 당시의 인기 검색 특화 포털 사이트 중 하나인 핫봇(HotBot)에 검색 결과를 제공하면서 본격적으로 검색 시장에 뛰어든다.

전성기

잉크토미의 데이터베이스의 크기는 1998년 1억 1천만 개로 늘어나는 등 [6] 계속 방대한 데이터베이스를 유지하는 데에 성공했다. 검색 결과를 제공받는 기업도 늘어가 1999년 잉크토미의 미국 검색 시장 점유율은 40%에 달하고 2000년에는 전 세계 인터넷 검색 엔진의 60%를 차지하는 등 1998년~2000년 사이에는 전 세계 검색 시장에서 1등을 차지하기도 했다. 잉크토미의 전성기 동안에 잉크토미가 검색 결과를 제공한 포털 사이트 중 대표적인 곳은 다음과 같다.

• 핫봇(1996~2004)
• 야후!(1998[7]~2000[8], 2004~2009)
• AOL(넷스케이프)(1999[9]~2002[10])
• MSN(1998~1999, 1999~2005)
• 오버추어(1998~2003)
• 룩스마트(1999~2004)
• 구우(goo.ne.jp)
  

이렇게 검색엔진으로 어느 정도 성공을 거둔 90년대 후반부터는 서버 트래픽 솔루션 및 캐시 서버(1997년), 쇼핑 검색(1998년), 기업용 검색 솔루션(2000년), 인터넷 방송 소프트웨어(2000년), CDN(2000년) 등의 분야에 기업을 인수합병하는 방식으로 사업을 문어발 식으로 확장하여 인터넷 인프라 유지에 핵심적인 기능을 하는 소프트웨어 및 서비스를 제공하는 업체가 되는 것을 목표로 한다.[11]

확장한 사업 중 서버 트래픽 솔루션 분야와 캐시 서버 분야는 AOL, MSN 등의 대형 인터넷 포털과 통신회사에 네트워크 캐시 상품을 납품하여 1998년에 전 세계 네트워크 캐시 상품 시장의 3분의 1을 차지하고, 2000년에는 52%의 점유율을 차지하는 등 검색결과 제공과 더불어 잉크토미의 주력 분야 중 하나가 되었다. 특히 2000년에는 네트워크 캐시 분야에서 얻은 수익이 포털 사이트에 검색결과를 납품하여 얻은 수익의 두 배가 넘는 등[12] 네트워크 캐시 분야는 잉크토미의 주요 수익원이기도 했다. 이러한 성공은 잉크토미가 2000년 2분기 당시 흑자를 내는 몇 안 되는 인터넷 기업 중 하나가 되는 바탕으로 작용했다.

몰락

하지만 이렇게 다양한 분야로 진출하고, 1등의 자리에 있다보니 검색엔진 분야에 신경을 비교적 덜 쓰게 되었다. 당시 인터넷 포털 업계에 퍼진 검색을 천대하는 분위기, 그리고 그에 따른 검색 결과 제공 분야의 수익성 악화도 잉크토미가 검색보다는 다른 분야에 투자를 하는 주요 원인 중 하나였다. 물론 이 때에도 잉크토미의 목표 중 하나가 입력한 검색어와 관련된 검색 결과를 도출하는, 정확한 검색엔진을 만드는 것이었던 만큼, 구글의 성장세를 무시하지는 않았다. 잉크토미는 구글의 PageRank에 대한 나름의 대응책을 세우고 자사의 검색 결과를 구글의 검색 결과와 대조해보는 등 지속적으로 구글을 견제하는 모습을 보여줬으며,[13] 결과적으로 검색 결과의 품질에서는 구글에 밀리지 않았다.[14]

하지만 잉크토미의 검색 결과는 페이지의 미리보기를 제공하지 않아서 구글보다 사용하기 불편했다. 또, 자사의 검색결과를 다른 사이트에 제공할 때 검색 결과를 보내는데 꽤 오래 걸려 쾌적한 사용감을 제공하지 못했다. 당시 잉크토미의 연구진이 이 문제를 발견하고 구글처럼 미리보기를 도입하고 직접 검색 사이트를 개설하자는 의견을 냈으나 고객과의 마찰을 피하고 싶었던 경영진은 이 의견을 무시했다. 결국 잉크토미는 검색엔진 분야에서 구글에 추월당하기 시작하는데, 이 때쯤 닷컴버블이 터져 큰 타격을 입었다. 거기에 닷컴버블 직후 그동안 잉크토미에서 검색 결과를 사갔던 주요 고객들이 이탈하거나 부도가 나 추가적인 타격을 입게 된다.

하지만 잉크토미에게 가장 큰 피해를 입힌 분야는 버블 이전에는 잉크토미에게 가장 많은 수익을 안겨주던 분야였던 서버 트래픽 솔루션 및 캐시 서버 사업 분야이다. 닷컴 버블로 인해 인터넷 트래픽도 확 줄었고, 이 때문에 한창 좋았을 때에 인프라에 공격적으로 투자하여 돈을 퍼부은 유선 통신회사들은 갑자기 자금난에 시달리게 된다. 여기에 회계 부정 사태가 일어났는데, 논란에 휩싸인 기업 중에는 큰 규모의 통신회사인 월드컴도 있어서(...) 월드컴과 연관된 통신회사들 역시 이 때에 매우 어려운 시기를 겪게 된다. 잉크토미의 주요 수익원인 솔루션 및 캐시 서버 제공 분야의 고객들이 자금난에 시달리면서 잉크토미도 큰 피해를 입게 된다.

확장한 사업도 영 시원찮은 상황이었다. 특히 쇼핑 검색 분야는 2년 정도 운영하다 2001년에 팔아버렸는데, 운영하는 2년 동안 적자만 엄청 났다(...). 이후 2003년에 야후!에 인수될 때까지 직원들의 90%를 정리해고 하면서 웹 검색 결과 제공 이외의 사업에서 전부 다 손을 떼고 다시 검색에만 집중하기 시작했지만 추락 이전의 기세를 회복하지는 못했다. 야후!에 인수된 후 잉크토미는 알타비스타, 올더웹과 함께 야후! 산하의 자회사가 되어 검색엔진 기술 R&D 센터로써 계속 존재했고, 그래도 2000년대 초반 및 중반까지는 구글과 더불어 웹 검색 시장을 양분하는 기업이었다. 하지만 MSN이 자체적인 검색 엔진을 2005년에 공개하면서 야후!와의 검색 결과 제휴 관계를 끊어 잉크토미의 검색 업체로써의 입지는 좁아지게 되었고, 2009년에 야후!가 자체적 검색 엔진을 포기하며 해당 분야를 마이크로소프트에 넘기고 bing과 제휴하면서 잉크토미의 검색엔진은 사실상 bing에 흡수된 상태이다.

잉크토미코리아

1999년에 잉크토미코리아라는 이름으로 한국에 진출했다. [15] 2000년에 천리안에 검색 결과를 제공하고[16] 2001년에는 다음에 검색 결과를 제공하기도 했지만[17], 한국에서는 검색 결과 제공 업체보다는 서버 트래픽 솔루션 제공 업체로 더 잘 알려져 있었다. 다른 솔루션 제공 업체들과 공동으로 협업을 하고, 한국의 네트워크 캐시 시장에서도 어느 정도 선방했지만, 닷컴버블 이후 잉크토미 본사가 정리해고를 하는 과정에서 2002년에 동종 업계의 기업인 펜타시스템에 인수된다.[18]

인터넷에 미친 영향

위에 열거된 고객의 목록에서 알 수 있듯, 잉크토미는 야후!, Hotbot, AOL, MSN 등 90년대 후반의 웬만한 주요 인터넷 검색엔진 및 포털 사이트의 검색 결과의 대부분을 제공했던, 세계 최강의 검색 업체 중 하나였다. 이렇게 널리 쓰이다 보니 잉크토미는 한 때 검색 엔진 최적화 분야에 종사하던 사람들의 제 1의 연구대상이자 목표대상이기도 했다. 기업 자체는 사실상 소멸했지만, 잉크토미에서 사용했던 기술은 지금도 많은 검색 엔진에 사용되고 있다.[19]

서버 트래픽 처리 관련 분야에 있어서도 병렬 컴퓨팅을 이용해서 확장이 쉬운 서버 컴퓨터의 사용에 앞장서고 네트워크 캐시를 이용해서 트래픽 부담을 감소시키는 방식을 퍼뜨리는데 큰 역할을 하는 등, 잉크토미는 오늘날 트래픽의 홍수 속에서도 안정적인 서비스를 제공할 수 있는 통신 환경을 형성하는데 상당히 큰 역할을 했다.

이렇게 인터넷에 미친 영향은 크지만 잉크토미에 대한 세간의 인식은 사실상 전무하다. 고객과의 마찰을 피하기 위해 자체 사이트를 개설하지 않는 등 직접 시장에 뛰어들지 않았기 때문에 브랜드 인지도가 떨어진 것이 그 원인이다.

여담

• 잉크토미의 첫 고객인 '핫봇'을 소유한 회사인 와이어드 디지털은 '와이어드(Wired)' 잡지도 소유한 기업이었다. 이 잡지는 기술 분야의 영향력 있는 잡지 중 하나였고, 핫봇과 잉크토미는 적어도 컴퓨터에 관심이 있는 사람들 사이에서는 잘 알려지게 되었다. 하지만 이 홍보 때문에 예상을 뛰어넘는 어마어마한 트래픽을 맞았고, 그 결과 잉크토미의 서버가 견디지를 못해 핫봇은 서비스를 시작하자마자 서비스 장애가 발생하는 상황이 벌어지기도 했다. 하지만 잉크토미는 당시의 다른 검색엔진과는 다르게 병렬 컴퓨팅을 활용해서 용이한 확장이 가능한 컴퓨터를 통해 서비스를 제공하고 있었고, 그 덕에 워크스테이션을 급히 공수해서 연결하는 방식으로 서버를 빠르게 확장하여 문제를 비교적 쉽게 해결할 수 있었다.
• 초기에는 대학교 건물 내에 서버가 있었는데, 서버실 내부에 스프링쿨러가 있는 등(...) 삐끗하면 서버 전체를 날려버릴 수 있는, 컴퓨터 보관에 영 좋지 않은 환경이었다고 한다. 이 문제는 소방법을 위반하고(!) 컴퓨터 위에 플라스틱 덮개를 씌우는 방식으로 해결했다고 한다.
• 회사 내에서 물총 싸움(...)을 벌이는 때가 있는 등 상당히 자유로운 사내 문화를 가지고 있었다고 한다.
• 마이크로소프트의 포털인 MSN이랑 계약 이야기가 한참 오갈 즈음에, 빌 게이츠에 대한 검색 결과 중 빌 게이츠를 악마로 묘사하는 내용이 담긴 웹 문서를 검색 결과 상위권에서 임시적으로 제거한 적이 있다(...). 이 업체도 마이크로소프트 앞에서는 을에 불과했다.
• 미국 정부는 2000년에 정부의 여러 가지 서비스와 기록물에 대한 접근성을 높이기 위한 포털 사이트인 'Firstgov'를 개발하고 있었는데, 잉크토미가 상업화되기 전에 지원을 해준 정부에게 감사를 표시하고 싶다고 밝히며 자사의 검색엔진을 2000년 8월에 기부하여 사이트의 개장을 앞당겼다. 참고로 초기에 잉크토미를 지원한 정부기관은 외계인 고문소로 잘 알려진 DARPA의 전신인 ARPA다(...).[20]

참고한 자료

[21] [22] [23] [24]