어텐션 메커니즘은 ‘쿼리(QUERY)’ ‘키(KEY)’ ‘밸류(VALUE)’라는 세 가지 기준을 계산해 문맥적 관계성을 파악합니다. 트랜스포머는 꽉 막혀 있던 AI 언어 모델에 돌파구를 제시했고, 구글이 트랜스포머를 공개한 논문 ‘Attention is all you need’는 8만 8761회(2023년 9월 14일 기준) 인용되며 많은 AI 관련 ...
어렵더라고요. 제 생각에는 다른 분야에 비해 문맥이 없어서 그런 것 같아요. 모든 것을 문맥상으로 이해하는 종류의 사람한테는 조금 힘들지요. 저는 아직도 가끔 헷갈려요. 고명준 /광주과고 3학년Q. 수학자들도 계산 실수를 하나요? 많이 하죠. 어느 수학자냐에 따라 다르겠지만, 저는 해요 ...
읽고 강세를 두며, 어떤 단어의 발음을 유의할지 등을 미리 파악했지요. 적절한 곳마다 문맥에 맞춰 끊어 읽을 줄 알아야 듣는 사람도 더욱 쉽게 이해할 수 있기 때문이에요. 만일 문장을 끊어 읽지 않으면 랩처럼 들리고, 말하는 사람도 쉽게 숨이 차거든요.대본 리딩 중 어려웠던 점은 생각지 못한 ...
디자인하는 과정에서 딥러닝을 활용해 캐릭터 애니메이션을 만들기도 한다. 자연어와 문맥을 이해하고 활용할 수 있는 모델(BERT)이나 생성적 적대 신경망(GAN)을 통해 진짜 같은 콘텐츠를 만들어내는 알고리즘이 활용되고 있다. 엔씨소프트의 보이스커맨드가 대표적인 예시다. 보이스커맨드는 ...
초대규모 한국어 AI입니다. 초대규모 AI란 인간처럼 추론할 수 있는 범용 AI를 뜻합니다. 문맥을 이해할 수 있어 실제 사람과 대화하듯 자연스러운 소통이 가능합니다. 예를 들어 “음악의 아버지가 누구야?”라는 질문에 하이퍼클로바는 “바흐입니다”라고 대답합니다. 이어 “근데 왜 아버지라고 ...
로봇 ‘뮤지오(Musio)’를 서울 노량진초등학교에 설치했다”고 밝혔어. 뮤즈는 대화의 문맥과 상황을 판단하고 사용자와 나눈 대화를 기억하는 방식으로 의사소통하는 AI야. 학생들의 영어 회화 학습과 실력 측정에 쓰일 거라고 해. AI는 확률 속에서 움직인다! AI의 학습 알고리듬에는 확률 개념이 ...
‘눈’은 영어로 ‘snow’나 ‘eye’로 번역할 수 있다. AI는 확률분포함수를 계산해 문맥에 맞을 확률이 더 높은 단어로 번역한다. 미국의 마이크로소프트가 운영하는 인터넷전화서비스 스카이프도 이 기술을 이용해 영어, 일본어, 중국어, 이탈리아어 등의 언어에 대한 음성 통역 기능을 제공하고 ...
생성할 때 ‘앞에서 뒤’ ‘뒤에서 앞’ 양방향으로 분석한다는 특징이 있다. 문맥을 이해하고 문장의 의미를 파악하는 데 유리하다.GPT-3는 가장 최근인 2020년 발표됐다. GPT-3는 양방향으로 자연어를 분석하는 버트와 달리 한 방향으로 분석하는 단방향 모델이다. 상대적으로 자연어를 이해하는 ...
7년간 수집한 약 10만 건 이상의 욕을 배웠어요. 그리고 국어사전을 공부해 문맥을 파악하는 방법을 학습한 뒤 비속어를 ‘○○○’으로 바꿔 사용자들이 볼 수 없도록 하지요. 한편, 사용자 스스로 악성 댓글을 달지 않도록 분위기를 형성하는 것도 중요해요. 여러 포털사이트에서는 댓글 작성자가 ...
있는 요즘에도 자주 연락하며 지낸다.영어 실력도 자연스럽게 늘었다. 여럿이 대화할 때 문맥에 맞는 농담도 쉽게 던질 수 있고, 모르는 주제나 은어가 나왔을 때 그 자리에서 아무렇지도 않게 물을 수도 있게 됐다. 물론 아직도 영어 발음이나 문장 구사력이 미국에서 태어난 사람과 같지는 않지만 ...