[음악] 우리가 함께 만들 캡스톤 애플리케이션에 대해 이야기를 해봅시다 텍스트, 영상, 감성 분석, 딥러닝을 모두 고려하는 똑똑한 상품 추천 시스템을 만들 겁니다 아주 신나는 캡스톤 프로젝트에 대해 이야기하기 전에 앞으로 만들 추천 시스템의 데모를 짧게 보여드릴텐데 이 시스템은 텍스트, 영상 데이터 둘 다 고려하고 딥러닝을 핵심 기술로 사용합니다 영상, 텍스트 데이터를 둘 다 고려하고 딥러닝을 핵심 기술로 사용하는 지능형 애플리케이션의 상품 추천을 예로 보여드리죠 이야기 하나로 시작보죠 제 여동생이 패션 디자이너인데 생일이 이번 달에 곧 다가옵니다 동생을 감동하게 할 선물을 사주려고 합니다 드레스를 사주고 싶네요 문제는 좋은 드레스를 고르기 어렵다는 점입니다 일단 제가 드레스에 대해 잘 모르죠 다들 하는 것처럼 키워드 검색으로 드레스를 검색합니다 그러면 여기 보시는 것과 같은 드레스가 나오겠죠 드레스 종류가 수도 없이 나오는데 동생이 어떤 걸 좋아할지 설명하기가 어렵기 때문에 꽃무늬 드레스 입는 걸 예전에 봤다고 가정하면 드레스와 꽃무늬를 합쳐서 키워드로 검색하고 드레스 상품 설명서를 훑어보면서 꽃무늬 드레스를 찾아볼 수 있겠죠 하지만 꽃무늬 드레스라고 정해도 꽃무늬 드레스의 종류가 다양하다는 게 문제입니다 그리고 각각의 스타일이 꽤 다르죠 그러니까 결국 어떤 게 동생한테 어울리는 스타일이냐는 겁니다 예를 들어 여기 이 드레스를 봅시다 왠지 동생이 좋아할 것 같습니다 따스하고 진한 노을빛 색깔이네요 텍스트 분석을 하면 이 드레스에 대한 설명이 있지만 사실 그냥 눈으로 보기에 좋습니다 시작적 신호로 비슷하게 보이는 다른 드레스를 찾을 수 있을까요? 캡스톤 프로젝트에서 이런 걸 합니다 이 드레스를 클릭하면 시각적으로 유사한 드레스를 딥러닝이란 기법을 사용해 찾아내게 되죠 첫 강의에서 이미 배운 걸 가지고 실전에서 응용하게 될 겁니다 이제 이 드레스를 클릭하면 오른쪽에 시각적으로 유사한 드레스를 여러 개 보게 됩니다 잘 살펴보면 드레스는 꽃무늬에 유사한 색조, 유사한 색깔을 가진 게 많지만 그래도 동생이 뭘 좋아할진 아직 알기 어렵습니다 하지만 여기 중간쯤 있는 드레스를 보고 와, 여기 색깔은 다른데 재밌는 무늬가 있네 동생이 이걸 좋아할지도 몰라 그리고 그걸 클릭하면 시각적으로 유사하고 재밌는 무늬를 지닌 여러 색깔의 드레스를 보게 됩니다 스크롤해서 내리면 비슷비슷하게 있죠 그리곤 여기 이게 제 눈에 띄였다고 합시다 동생이 좋아할 거 같아서요 동생한테 전화를 걸어서 좋아 보이는 드레스 찾았어 이거야 동생한테 전화를 건다고 치고 동생도 이 모델과 대충 비슷하게 생겼다고 합시다 전화를 걸어서 물어보면 동생은 괜찮긴 한데 칵테일 파티 가야 되거든 칵테일 드레스를 찾아주면 안될까 생각해보곤 다시 시작하죠 칵테일 드레스를 찾아주려고 합니다 칵테일 드레스는 좀 더 격식 있는 모임에 갈 때 입는 건데 이렇게 생겼습니다 다양한 색과 무늬가 있죠 그런데 아마 동생은 검은 칵테일 드레스를 가지고 싶어할 겁니다 검은 칵테일 드레스라고 키워드 검색을 해주면 이런 것들이 나오는데 동생이 어떤 걸 좋아할지 설명하기가 어렵습니다 그래서 다시 묻죠 너 뭐 좋아하냐 동생은 재밌어 보이면서 약간의 색채가 들어간 칵테일 드레스가 좋을 것 같다고 하죠 패션 디자이너니까요 어떻게 하죠? 어떻게 풀어냅니까? 여기 있는 것들을 보고 왼쪽에 있는 몇 개는 왠지 재밌어 보이는데 연관 키워드를 보니까 화려한이라고 나옵니다 그러니까 아마 동생이 화려한 드레스를 좋아하나 보죠 화려한 드레스는 그럼 어떻게 생겼나요? 텍스트에 나오는 키워드를 클릭하고 나오는 다른 화려한 드레스를 보면 재밌어 보이긴 하는데 별로 칵테일 드레스 같지는 않습니다 그러니 이걸 클릭해서 시각적으로 유사한 칵테일 드레스를 찾아봅니다 이제는 꽤 재밌는 무늬가 달린 칵테일 드레스가 나옵니다 동생이 말하는 것처럼 재밌어 보입니다 이제 스크롤을 내려보면 여기 이게 꽤 멋져 보입니다 여기 가운데 파랗고 알록달록한 게 동생이 찾는 거 같습니다 클릭하니 잠깐만 이건 칵테일 드레스라기엔 너무 자유분방하다 싶어 내리다 보면 비슷하지만 칵테일 드레스만큼 격식 있는데다 약간의 색채가 들어가있고 재밌어 보입니다 이거야 말로 동생이 입을만한 옷 같습니다 이렇게 텍스트 데이터, 영상 데이터를 가지고 딥러닝을 사용해 여러 멋지고 흥미로운 작업을 하는 지능형 애플리케이션을 살펴보았습니다 시각적 상품 추천을 위한 딥러닝 데모를 보았죠 하지만 캡스톤에서는 훨씬 멋지고 더 흥미로운 걸 하게 됩니다 캡스톤 프로젝트에 다양한 걸 합칩니다 추천 시스템에서 텍스트 분석, 감성 분석, 각각의 상품에 대한 리뷰를 추출하고 분석하게 되죠 컴퓨터 비전으로 영상을 이해하는 작업도 할 겁니다 컴퓨터 비전 기법에 딥러닝을 더해 굉장히 정확하게 만들 겁니다 그런 다음 만든 걸 가지고 여기 보여 드리는 웹페이지 같은 웹 서비스로 배포하는 거죠 직접 조작해보고 이것저것 해볼 수 있는 당신만의 지능형 상품 웹 서비스를 만들고 그 서비스 뒤에서 동작하는 지능을 어떻게 만들었는지 보여줄 것입니다 [음악]