Positional Encoding 이해하기
Transformer 구조에 활용되는 Positional Encoding의 개념과 역할, 수식을 설명합니다. Positional encoding은 Transformer 에서 사용되는 중요한 요소 중 하나입니다. Transformer는 순차적인 구조를 사용하지 않기에 입력 시퀀스의 각 위치에 대한 정보를 인코딩하는 방법이 필요합니다. 따라서...
Transformer 구조에 활용되는 Positional Encoding의 개념과 역할, 수식을 설명합니다. Positional encoding은 Transformer 에서 사용되는 중요한 요소 중 하나입니다. Transformer는 순차적인 구조를 사용하지 않기에 입력 시퀀스의 각 위치에 대한 정보를 인코딩하는 방법이 필요합니다. 따라서...
2023년 10월의 AI 기술 동향과 주요 뉴스, 논문, 글, 사례 등을 소개합니다. Generative AI, MLOps, 데이터 관리와 관련된 여러 기술들이 주목 받았으며, 특히 데이터베이스는 대용량 데이터 처리와 보안에 중점을 두고 발전하고 있습니다. 이들 기술들은 서로 융합되면서 데이터 기반 의사결정 및 비즈니스 전략에 큰 영향을 미...
Jekyll의 Chirpy Theme로 깃허브 블로그를 시작하는 방법을 소개합니다. Jekyll는 Ruby 언어로 개발된 정적 사이트 생성기 입니다. HTML 기반으로 커스텀이 용이하며 다양한 템플릿이 있습니다. 그중에서도 Chirpy 템플릿은 기능이 풍부하고 미니멀한 오픈소스 테마입니다. 깔끔하고 사용하기 쉬운 디자인이며 다양한 기능들을 ...
음성데이터에 대한 전처리, 특성 추출 및 증강 기법을 정리합니다. 음성 데이터에 대한 Feature Extraction은 음성 관련 모델링에서 중요한 과정 중 하나입니다. Feature Extraction 에는 여러 기법이 사용되며, 음성 신호를 효율적으로 표현하고 노이즈를 감소시켜 머신러닝/딥러닝 모델링에 적합한 형태로 변환시켜...
음성 신호의 개념과 MFCC 기법을 자세히 알아봅시다. Speech Emotion Recognition (SER)과 같은 task를 위해 머신러닝/딥러닝 모델을 개발하는 경우에, 일반적으로 음성 데이터를 MFCC와 같은 Feature로 변환하여 활용합니다. 이는 음성 내용을 식별하는데 적합한 오디오 구성 요소를 강조하고 배경 소음과 같은...