목록2023/10 (27)

Data Analyst KIM

[Deep Learning] Attention을 사용한 신경망

Attention은 모델이 각 단계에서 서로 다른 입력 요소의 중요성에 가중치를 다르게 부여하는 방법이다. Attention의 구현 원리는 다음의 그림과 같다. 먼저 인코더와 디코더 사이에 층이 하나 생긴다. 새로 삽입된 층에는 각 셀로부터 계산된 스코어들이 모인다. 이 스코어를 이용해 softmax 함수를 사용해서 Attention 가중치를 만든다. 예를 들어 '당신께'라는 자리에 가장 적절한 단어는 'you'라는 것을 학습한다. 이러한 방식으로 매 출력마다 모든 입력 값을 활용하게 하는 것이 어텐션이다. 마지막 셀에 모든 입력이 집중되는 RNN의 단점을 극복해낸 알고리즘이다. Attention을 활용하여 구현을 해보자. !pip install attention from tensorflow.keras...
데이터 분석/ML&DL&NLP 2023. 10. 26. 15:29
[Deep Learning] RNN,LSTM의 개념 및 로이터 뉴스 카테고리 분류하기

순환 신경망(RNN, Recurrent Neural Network) 연속된 데이터가순서대로 입력되었을때 앞서 입력받은데이터를 잠시 기억해 놓는 방법 기억된 데이터 당 중요도 가중치를 주면서다음 데이터로 넘어감 모든 입력 값에 이 작업을 순서대로실행. 다음 층으로넘어가기 전 같은 층을 맴도는 것처럼보임 LSTM(Long Short Term Memory) → RNN의 기울기 소실 문제 보완을위해 나온 방법 한 층에서반복되기 직전에 다음 층으로 기억된 값을 넘길지 관리하는단계를 하나 더 추가하는것 1. LSTM을 이용한 로이터 뉴스 카테고리 분류하기 입력된 문장의 의미를 파악하는 것은 모든 단어를 종합하여 하나의 카테고리로 분류하는 작업 로이터 뉴스를 읽고 어떤 의미를 지니는지 카테고리 분류 로이터 뉴스 데이..
데이터 분석/ML&DL&NLP 2023. 10. 26. 15:03
[MySQL] 년, 월, 성별 별 상품 구매 회원 수 구하기(프로그래머스_Lv.4)

USER_INFO 와 ONLINE_SALE을 INNER JOIN으로 묶어주고 성별 값이 누락인 값은 제외시켜준다. 년도,월,성별 별로 상품을 구매한 회원수를 구해야하기 때문에 년도와 월의 컬럼을 만들어준다. 이 후 WITH를 활용하여 UserSales 테이블을 만들어준다. UserSales 에서 GROUP BY를 이용하여 년도,월,성별에 따라 집계해주고 SELECT절에서 user_id를 세어주는데 회원수이기 때문에 한명의 회원이 10번 구매한 것은 1번으로 봐야한다. 따라서 DISTINCT로 중복을 제거해준다. WITH UserSales AS ( SELECT u.USER_ID AS user_id, u.GENDER, o.SALES_DATE, YEAR(o.SALES_DATE) AS year, MONTH(o...
데이터 분석/Coding Test 2023. 10. 26. 10:44
[모닝스쿨] 40일차(2023.10.24_07:30~08:30)_박미경 선생님과 함께

모든 직무에서 '본질'은 "문제를 해결하는 것" 1. 명상 https://youtu.be/6uWKOu79yVM?si=JjX6S5sN7nHPSnLw 2. 오늘의 감사 인사 1. 시간 관리의 중요성을 깨닫고 다시 관리에 들어간 '자신'에게 감사합니다. 2. 모닝스쿨 40일차를 40명의 인원들과 함께 할 수 있음에 감사합니다. 3. 매일 도시락을 챙겨주시는 어머니에게 감사합니다. 사랑합니다. 3. 면접 때 알면 좋을 행동 심리학 5가지 https://youtu.be/4m6AuVoWx84?si=Ge9dnxIRYm92ui0- 장점과 단점의 타이밍 → 약점을 먼저 말한 후 장점을 말하는 것이 효과적이다. 리프레이밍 → 같은 상황이라도 재정의를 해서 이야기를 해라 침묵의 활용 → 어...음... 보다는 침묵을 활용하..
취업사관학교/모닝스쿨 2023. 10. 24. 17:24
[모닝스쿨] 39일차(2023.10.19_07:30~08:30)_박미경 선생님과 함께

1. 명상 https://youtu.be/6uWKOu79yVM?si=zW_TfmEEHj-lQ2AR 2. 오늘의 감사 인사 - '강의'라는 것으로 돈을 벌었음에 감사합니다. - Tableau교육을 국비지원으로 강의를 들을 수 있음에 감사합니다. - 빅데이터 과정을 하는 동안 열심히 강의를 해주신 김성필 박사님에게 감사합니다.
취업사관학교/모닝스쿨 2023. 10. 23. 14:55
[모닝스쿨] 38일차(2023.10.17_07:30~08:30)_박미경 선생님과 함께

1. 명상 오늘도 명상으로 하루를 시작했다. 10월이 되서 느끼는 것이 진짜 많다. 3월부터 8월까지 열심히 했는데 9월부터 현재까지 시간관리를 잘 못하고 있다. 1주,2주를 관리하지 않으니깐 패턴이 깨지고 공모전과 각종 수업들을 한다는 핑계로 시간관리를 소홀히 했다. 확실히 나는 시간관리를 통해 매주,매일의 미션을 수행하며 성장하고 행복함을 느끼는 것같다. 명상을 하면 생각을 하지 않아야하는데 오늘은 내가 잘못하고 있는 것을 반성하는 시간을 가졌다. https://youtu.be/6uWKOu79yVM?si=zW_TfmEEHj-lQ2AR 2. 오늘의 감사 인사 - 주말동안 부모님 일을 도와드릴 수 있음에 감사합니다. - 오늘도 늦지 않고 모닝스쿨에 참여한 자신에게 감사합니다. - SQL 공부가 너무 재미..
취업사관학교/모닝스쿨 2023. 10. 23. 14:54
이전 Prev 1 2 3 4 5 Next 다음