Optimizer
![[NLP] BertAdam optimizer 의 개념 & Adam 과의 차이점 정리!](https://img1.daumcdn.net/thumb/R750x0/?scode=mtistory2&fname=https%3A%2F%2Fblog.kakaocdn.net%2Fdna%2FIREDs%2Fbtq84uNx4OW%2FAAAAAAAAAAAAAAAAAAAAAM1npZmFPC88pStUj8HiT8cPTAJFyJAoxjEjiaeg8d3o%2Fimg.png%3Fcredential%3DyqXZFxpELC7KVnFOS48ylbz2pIh7yKj8%26expires%3D1753973999%26allow_ip%3D%26allow_referer%3D%26signature%3D9%252Fi7Uxm0kpzncTFs5rrF8PcJ5ow%253D)
[NLP] BertAdam optimizer 의 개념 & Adam 과의 차이점 정리!
velog 로 글을 옮겼습니다! 🚚 [NLP] BertAdam optimizer 의 개념 & Adam 과의 차이점 정리! Hi! I'm Jaylnne. ✋오늘은 BERT 모델을 공부하던 중 BERTAdam이라는 독특한 옵티마이저(optimizer)를 접하게 되어서 이것에 대해 정리해보고자 글을 써보기로 했습니다.아래 huggingface 깃헙 링크에 BERTAdam velog.io