자신에 대한 고찰

Dopamine은 Google Research에서 만든 강화학습 실험용 Framework이다. 사실 이 툴의 취지는 SW 개발적인 측면보다는 강화학습 알고리즘 개발에 치중할 수 있도록 환경과 에이전트 설정을 configuration화시킨 것이다. 그래서 소개란에도 "Fast prototyping of reinforcement learning algorithm"이라고 되어 있다. Framework에 대한 논문은 아래에 있다. Dopamine: A Research Framework for Deep Reinforcement Learning Deep reinforcement learning (deep RL) research has grown significantly in recent years. A number..

Kickstarter에서 펀딩한 물건이 왔다. 이름은 Bangle.js 2. 외형은 애플워치를 닮긴했는데, display되는 것은 조금 투박하긴 하다. 그런데 사실 이 시계가 표방하는 것은 Open Hackable Smart Watch, 즉 오픈소스로 프로그래밍이 가능한 것이다. Base는 esp32기반인데, espruino라는 마이크로컨트롤러에서 javascript를 돌릴수 있는 interpreter가 내장되어 있다. 그래서 사용자가 javascript만 할줄 알면, app loader를 통해서 원하는 기능을 시계에 넣을 수 있다. 시계치고는 터치스크린과 버튼, 심박동 센서. pedometer 같은 센서들이 달려있어 뭔가 좀 써먹기 좋아보인다. https://www.espruino.com/ Esprui..

(해당 포스트에서 소개하고 있는 "구글 BERT의 정석" 책은 한빛 미디어로부터 제공받았음을 알려드립니다.) 구글 BERT의 정석 이 책은 BERT의 기본 개념부터 다양한 변형 모델, 응용 사례까지 한 권으로 담은 실무 지침서다. 기계번역, 챗봇, 정보 검색 등 다양한 사례를 중심으로 BERT의 양방향을 활용하여 최소한의 데이터 hanbit.co.kr 인공지능이 적용되고 있는 생활 분야는 다양하게 있지만, 가장 큰 체감이 느껴지는 분야는 역시 자연어처리(Natural Language Processing, NLP)가 아닐까 싶다. 어느 순간부터 상점 웹페이지에 들어가면 챗봇이 상담을 대신해주기도 하고, 집에도 이제는 어느새 스마트 스피커가 하나쯤은 존재한다. 나같은 경우에는 구글 어시스턴트에 루틴을 만들어..

(해당 포스트에서 소개하고 있는 "파이썬으로 배우는 자료구조 핵심 원리" 책은 길벗출판사로부터 제공받았음을 알려드립니다.) 파이썬으로 배우는 자료 구조 핵심 원리 핵심 개념과 동작 원리로 이해하는 자료 구조 www.gilbut.co.kr 대학교를 졸업하고 나서, 후회한 일 중 하나는 자료구조론 수업을 게을리들었던 것이다. 마침 같이 수업듣던 동아리형이 수업듣는 것을 많이 도와주셨지만, 지금 돌이켜보면 그때 스스로 이해를 하려고 노력하고, 과제를 풀려고 노력했으면 적어도 스스로 프로그래밍하는 것에는 어려움이 없었을 것 같다. 말은 이렇게 했지만 자료구조는 개발하는데 있어서 거의 필수적인 지식 중 하나이다. 물론 요새는 프레임워크 자체가 잘되어 있어, API 하나 딱 쓰면 원하는 출력물을 얻을 수 있긴 하지..

최근 다양한 교육기관에서 인공지능 교육을 제공하고 있다. 물론 비용을 어느정도 들여야 수업을 받을 수 있는 경우도 있지만, 잘 찾아보면 무료로 교육을 받을 수 있는 곳도 많이 있는것 같다. 나도 시간을 쪼개서 들을 수 있는 수업을 찾아서 들어본 편이고, 아는 내용이더라도 다시한번 들어보면서 아 어떤식으로 어떤 내용을 가르치면 좋겠구나 하는 것을 파악하는 편이다. 그 중 최근에 수강했던 수업 중 공유하면 좋을 것 같아서 이번 포스트에서 소개해본다. 정보통신산업진흥원에서는 개발자를 위한 다양한 교육을 무료로 제공하는데, 그 중 하나는 elice.io 플랫폼과 결합한 인공지능 교육이다. 2021 NIPA AI 온라인 교육 | 엘리스: 코딩, 엘리스에서 시작하세요! 실습중심 온라인 코딩교육, 엘리스! 개인 및 ..

(해당 포스트에서 소개하고 있는 "제대로 배우는 수학적 최적화" 책은 한빛미디어로부터 제공받았음을 알려드립니다.) 제대로 배우는 수학적 최적화 국내 유일의 수학적 최적화 기본 지식을 안내하는 입문서 hanbit.co.kr 아마 중학교 때부터 사람들이 방정식이라는 것을 접하고, 수학이라는 게 참 어려운 것이 답, 혹은 해를 찾는 것이라는 것을 깨닫는다. 물론 이차방정식, 삼차방정식은 해를 풀 수 있는 기법들이 제공되어 쉽게 풀 수 있다고는 하지만, 이런 식들을 다른 식들과 연계되면 그 해를 구하는 과정이 조금 더 복잡해진다. 재미있는 것은 대학교를 졸업하고, 취업을 해도 이 해를 구하는 과정은 계속된다는 것이다. 오히려 학생때 접했던 것처럼 명확한 수학 공식이 아니라, 글로 표현된 현상을 이해하고, 이에 ..

며칠전에 DeepMind에서 강화학습 벤치마크로 많이 쓰이는 물리엔진인 MuJoCo를 무료로 공개했다. Opening up a physics simulator for robotics As part of DeepMind's mission of advancing science, we have acquired the MuJoCo physics simulator and are making it freely available for everyone, to support research everywhere. deepmind.com 이 MuJoCo 엔진이 참 뭐한게 가격은 가격대로 비싸면서, 지원도 잘 안해주고, 뭔가 뒷단에서 필요로 하는 패키지들이 너무 많아 사용하는데 벽이 좀 있었다. 물론 학생들한테는 1년 라이..

몇 달전에 번역하고 있는 책에 대한 짧은 글을 썼었는데, 며칠 전에 하판되었다는 연락을 받고, 이번주 일요일에 출간한다는 이야기를 전달받았다. 실제로 출판사 웹사이트에도 등록되어 있는 것도 확인했다. 그로킹 심층 강화학습 개념을 수식부터 실습 코드까지 하나씩 떠먹여주는 심층 강화학습 가이드 hanbit.co.kr 어떻게 보면 인생의 버킷리스트 중 하나였는데, 주변에서도 많이 배려해주시고 도와주셔서 무사히 출판까지 잘 진행되었다. 깜빡하고 옮긴이의 글에는 못 남겼지만, 책이 나오는데까지 힘써주신 분들께 감사하다는 말씀을 드리고 싶다. 이전 포스트에서도 간단하게 소개했었지만, 다시한번 언급하자면 너무 이론적인 내용이나 실용적인 구현에 치중하지 않고, 기본적인 강화학습 개념부터 많이 언급되는 심층 강화학습 알..

(해당 포스트에서 소개하고 있는 "만들면서 배우는 파이토치 딥러닝" 책은 한빛미디어로부터 제공받았음을 알려드립니다.) 만들면서 배우는 파이토치 딥러닝 입문서에서는 알기 어려웠던 전이학습과 파인튜닝을 활용한 화상 분류, 물체 감지, 시맨틱 분할, 자세 추정, GAN을 활용한 화상 생성 및 이상 탐지, 텍스트 데이터 감정 분석, 동영상 데이터 클래 hanbit.co.kr 인공지능에 대한 관심이 늘면서, 서점의 IT 섹션에 가면 딥러닝, 머신러닝, 인공지능 책들이 많이 전시되어 있다. 나도 가끔 퇴근하면서, 요새 나오는 인공지능 전문서적들의 트랜드가 어떤지에 대해서 살펴보곤한다. 많은 책들은 본 것은 아니지만, 시중에서 많이 살펴보는 책들은 아무래도 다음과 같은 경향을 가지고 있지 않나 싶다. 머신러닝의 기초..

KL Divergence는 distribution간의 차이를 표현해주는 information? 0에 가까우면, 그만큼 두 distribution의 차이는 거의 없다. KL Divergence는 항상 양수의 값을 가지며, 역에 대한 식은 같지 않다. 위의 그림은 true distribution(p)이 있을 때, 임의의 distribution(q)이 잘 쫓아가는지를 확인하려고 변화하는 경향을 animation으로 표현한 것이다. 구현코드는 참고!