이 시리즈는 NLP 분야의 핵심 논문들을 정리하고 리뷰하는 글입니다.논문의 주요 기여와 핵심 개념을 개인적으로 이해한 관점에서 풀어내며실제 프로젝트나 연구에 어떻게 적용할 수 있을지에 대한 생각도 함께 담았습니다. 📌 논문 정보논문 제목: Improving Language Understanding by Generative Pre-Training (GPT-1)저자/소속: Alec Radford, Karthik Narasimhan, Tim Salimans, Ilya Sutskever / OpenAI출판 연도 / 학회: 2018년 / OpenAI Preprint링크: 논문 PDF ✍🏻 TL;DR – 한 줄 요약Transformer 기반 언어 모델을 대규모 비지도 학습으로 사전 훈련한 후, 소량의 지도 학..
이 시리즈는 NLP 분야의 핵심 논문들을 정리하고 리뷰하는 글입니다.논문의 주요 기여와 핵심 개념을 개인적으로 이해한 관점에서 풀어내며실제 프로젝트나 연구에 어떻게 적용할 수 있을지에 대한 생각도 함께 담았습니다. 📌 논문 정보논문 제목: Deep contextualized word representations저자/소속: Matthew E. Peters, Mark Neumann, Mohit Iyyer, Matt Gardner, Christopher Clark, Kenton Lee, Luke Zettlemoyer / Allen Institute for Artificial Intelligence (AI2), University of Washington출판 연도 / 학회: 2018년 / NAACL-HLT링크..
이 시리즈는 NLP 분야의 핵심 논문들을 정리하고 리뷰하는 글입니다.논문의 주요 기여와 핵심 개념을 개인적으로 이해한 관점에서 풀어내며실제 프로젝트나 연구에 어떻게 적용할 수 있을지에 대한 생각도 함께 담았습니다. 📌 논문 정보논문 제목: Attention Is All You Need저자 / 소속: Ashish Vaswani, Noam Shazeer, Niki Parmar, Jakob Uszkoreit, Llion Jones, Łukasz Kaiser, Illia Polosukhin (Google Brain / Google Research), Aidan N. Gomez (University of Toronto)출판 연도 / 학회: 2017년 / NeurIPS링크논문: https://arxiv.org/a..
이 시리즈는 NLP 분야의 핵심 논문들을 정리하고 리뷰하는 글입니다.논문의 주요 기여와 핵심 개념을 개인적으로 이해한 관점에서 풀어내며실제 프로젝트나 연구에 어떻게 적용할 수 있을지에 대한 생각도 함께 담았습니다. 📌 논문 정보논문 제목: Enriching Word Vectors with Subword Information저자/소속: Piotr Bojanowski, Edouard Grave, Armand Joulin, Tomas Mikolov / FaceBook AI Research (FAIR)출판 연도 / 학회: 2017년 / Transactions of the Association for Computational Linguistics (TACL)링크논문: https://arxiv.org/abs/1..
한빛미디어 서평단 활동을 위해서책을 협찬받아 작성된 서평입니다.📚 책 소개오늘 소개할 책은 ⌜LLM 서비스 설계와 최적화 (슈레야스 수브라마니암)⌟이다. 📍 책 선택 이유 부스트캠프에서 OpenAI API를 활용한 기능을 개발하는 부분을 맡아서 진행한 적이 있었다. 프롬프트 최적화를 진행하느라 프롬프트를 작성하고 API를 호출한 후 결과를 보는 작업을 반복하고 최종 프롬프트로 원하는 작업을 진행하기 위해 많은 양의 결과를 한 번에 요청했다가 중간에 에러가 발생하여 처음부터 다시 하는 등의 상황이 발생하여 많은 시간을 들이고 API 비용으로 많은 돈을 낭비하게 된 경험이 있다. LLM을 활용할 수 밖에 없는 요즘, 비용 최적화와 성능 최적화를 위한 설계 방법을 익힐 필요가 있음을 절실하게 느끼게 되었..
이지스퍼블리싱 출판사의 서평단 활동으로제공받은 도서를 읽고 솔직하게 작성한 리뷰입니다.📚 책 소개오늘 소개할 책은 ⌜Do it! LLM을 활용한 AI 에이전트 개발 입문 (이성용)⌟이다. 📍 책 선택 이유 몇 달 전부터 AI 분야에서 가장 주목받는 키워드 중 하나인 AI 에이전트에 대해 자주 접해왔고 개념적으로는 알고 있었지만 실제로 프로젝트를 진행해 본 경험은 없어 항상 시도해보고 싶다는 생각만 하며 미뤄두고 있었다. 그러던 중 이지스퍼블리싱에서 관련 도서가 출간된다는 소식을 알게 되었고 자연스럽게 다시 관심이 생겼다. 평소에도 Do it! 시리즈를 통해 실습 위주의 구성과 친절한 설명에서 큰 도움을 받아왔기 때문에 이번 책 역시 실습 중심으로 잘 구성되어 있을 것이라는 기대가 생겼다. 이제 막 ..
프리렉 출판사의 서평단 활동으로제공받은 도서를 읽고 솔직하게 작성한 리뷰입니다.📚 책 소개오늘 소개할 책은 ⌜RAG 마스터: 랭체인으로 완성하는 LLM 서비스 (브라이스유, 조경아, 박수진, 김재웅)⌟이다. 📍 책 선택 이유 2024년 1학기에 진행한 졸업 프로젝트에서 RAG 기술을 활용한 챗봇을 개발하면서 RAG에 대해 처음 공부하게 되었고 기존의 검색 기반 QA 시스템의 한계를 해결할 수 있는 유용한 기술이라고 느꼈다. 그 활용도가 무궁무진할 것이라는 생각에 관심을 갖게 되었고 이후 부스트캠프 프로젝트에서도 RAG 활용을 도입했으며 최근에는 OSSCA에서 Onthology-based RAG (그래프 RAG) 프로젝트에 참여하며 학습을 이어가고 있다. 이처럼 RAG를 활용한 다양한 프로젝트를 진행..
한빛미디어 서평단 활동을 위해서책을 협찬받아 작성된 서평입니다.📚 책 소개오늘 소개할 책은 ⌜한 권으로 끝내는 만만한 자소서 (취업왕 이쌤)⌟이다. 📍 책 선택 이유 이번 상반기에도 휴학 상태를 유지하며 인턴이나 2026년 2월 입사를 목표로 취업 준비를 하고 있다. 프로젝트나 대외활동 등 경험은 많았지만 이를 어떻게 효과적으로 강조해야 할지 감이 잡히지 않아 자기소개서를 쓸 때마다 평범하고 뻔한 표현만 반복하게 됐다. 여러 합격 자소서를 참고해도 어떤 점이 특별한지 명확히 느껴지지 않았고 어떻게 해야 서류 전형을 통과할 수 있을지 알 수 없어 막막한 상태가 지속됐다. 취업 특강도 들어봤지만 대부분의 내용이 비슷하게 느껴졌고 실질적인 방향을 잡는 데 도움이 되지 않았다. 그래서 지금 나에게 필요한 ..
이 시리즈는 99클럽 1일 1아티클 챌린지에 참여하며 매일 한 편의 아티클을 읽고, 인상 깊었던 문장과 개인적인 느낀 점, 핵심 내용을 기록한 글입니다. 매일 한 걸음씩, 꾸준히 성장하는 과정을 담습니다. 📌 아티클 정보제목: 시니어 개발자로 성장하기 위한 핵심 역량 - '육각형 개발자' 책 리뷰 - 2링크: https://haley-memo.tistory.com/entry/%EC%8B%9C%EB%8B%88%EC%96%B4-%EA%B0%9C%EB%B0%9C%EC%9E%90%EB%A1%9C-%EC%84%B1%EC%9E%A5%ED%95%98%EA%B8%B0-%EC%9C%84%ED%95%9C-%ED%95%B5%EC%8B%AC-%EC%97%AD%EB%9F%89-%EC%9C%A1%EA%B0%81%ED%98%..