데분데싸

번역글 출처: https://m.dcinside.com/board/github/31416 Matthew Lai, Research Engineer at DeepMind, coauthor of "AlphaGo" : 퍼포먼스를 예측할 때 면접자의 경험은 형편없는 지표이기 때문입니다. 저는 이제 경력 5년차이며, 알파고 프로젝트를 포함한 많은 첨단 머신러닝 프로젝트에 참가했습니다. 경력이 고작 2년뿐인데도 지금의 저보다 훨씬 유능한 사람을 저는 여러 명 보았습니다. 경력을 20년 넘게 쌓았는데도 제가 대학에 입학할 당시보다도 훨씬 실력없는 사람을 저는 수도 없이 봅니다. 저는 CTO라든지 기술 리드라든지 하는 멋진 직함을 가진 사람들을 많이 면접 보았습니다. 이 중 많은 사람들은 제가 기술적 질문을 하기 시작하..

지난 강의에 이어, 감사하게도 중앙교육연수원에서 새롭게 강의를 요청해주셨다. 이번엔, 전국 9급 신규 임용자 150명을 대상으로 빅데이터에 대한 이해와 사례들을 위주로 2시간 강의를 요청해주셨다. 지난 강의는 내가 있는 센터에 대한 소개와, 센터에서의 데이터 분석 사례들을 위주로 강의를 진행했다면 이번에는 센터가 아닌 데이터 그 자체에 대해 조금 더 초점을 맞춰서 준비를 할 수 있었다. 강의를 준비하면서, DALL-E 2가 정말 핫해서 써보고싶었는데, 아쉽게도 사용할 수 없어 DALL-E를 사용해서 입력 키워드가 무엇일지 막간을 이용한 퀴즈도 냈다. DALL-E 2 대신 퀄리티 좋은 그림을 무료로 그려주는 인공지능 서비스도 몇 개 더 활용했다. https://midjourney.com/ 에서 그림을 그릴..

중앙교육연수원에서 전국 신임 장학사 및 교육 연구사 150명 대상의 역량강화 과정으로, 빅데이터에 관한 교육 요청을 받아 강의를 할 기회가 생겼다. 원래 내가 강의를 맡을 계획은 아니었지만 당초 강의를 진행할 예정이었던 회사 선배가 강의 직전 주말 코로나에 걸리는 바람에 땜빵으로 급하게 내가 강의를 진행한 것이었다. 한 번 강의를 해보는 것도 재밌고 좋은 경험일 듯 하여 선뜻 나섰고, 주말을 반납하고 내 식대로 강의자료를 보완하고 다듬었다. 지금까지 일을 해오신 경력과 연륜이 있으신 분들 앞에서 이야기를 하려니 떨리기도 했지만, 책을 펼치면 단순히 3V, 5V로 밖에 표현되지 않은 빅데이터의 특징을 내가 지금껏 경험하면서 느낀 직관과 경험을 토대로 더욱 풍성하게 덧대어 이야기 할 수 있어 좋은 경험이었다..

오늘은 정말 소오름 끼치는 하루를 보냈다. 평소 구독 수준으로 즐겨보는 블로그가 있다. 알만한 사람들은 모두 다 알고 있는, 이름하야 파비 블로그이다. https://blog.pabii.co.kr/ 데이터 사이언스 랩 – 파비블로그 인공지능, AI, 딥러닝, 머신러닝 이라고 불리는 지식이 수리통계학 기반의 계산통계학 지식이라는 것을 강조하는 블로그입니다. 데이터 사이언스에 대한 정확한 이해를 바탕으로 해외 대학과 연 blog.pabii.co.kr 내가 데이터 업무를 얕게 나마 시작한 이후부터, 나의 데이터 직무에 관한 가치관을 쌓아나가는데 지대한 영향을 미친 블로그이다. 숨길 수 없는 강한 어조 탓에 불쾌감을 굉장히 짙게 드러내는 분들도 많지만, 굉장한 high level이라는 건 글 몇 개만 보더라도 ..

https://www.samsungsds.com/kr/insights/data_centric_ai.html 인공지능의 한계 3 - AI 응용 상용화 85% 실패, 그리고 Data-Centric AI로의 이동 인공지능의 한계 3 - AI 응용 상용화 85% 실패, 그리고 Data-Centric AI로의 이동 www.samsungsds.com 나의 블로그 이름을 짓는데 지대한 영향을 끼친 오픈 카톡방이 있다. 이름하여 데분데분(데이터분석 QnA&네트워킹) 카톡방이다(ㅋㅋㅋㅋㅋ). 그 카톡방에 매우 흥미로운 블로그 글이 올라와 정독해보았다. 위 블로그 글은 머신러닝의 아버지 Andrew Ng의 세미나 내용을 정리한 것으로 링크는 아래에 있다. https://www.youtube.com/watch?v=06-AZ..

https://www.kaggle.com/code/shivanandmn/beginners-guide-to-pytorch-lightning/notebook Beginners Guide to PyTorch-Lightning Explore and run machine learning code with Kaggle Notebooks | Using data from No attached data sources www.kaggle.com This is basic look of pytorch-lighning¶There are many reserved methods in the lighningmodules called hooks: configure_optimizers - this should return optimiz..

https://gall.dcinside.com/mgallery/board/view/?id=statistics&no=2326&page=1 데싸 얘기, 면접질문 등 - 통계 갤러리 데싸 재직 중인 통피다 울 회사 데싸들은 각자 잘 하는 게 다 달라. 난 그 중에서도 도메인이랑 통계 파트를 맡고 있고. 개발 잘 하시는 분도 있고, 컴공출신 분, DB 설계 잘 하시는 분, 도메인 출 gall.dcinside.com 데싸 재직 중인 통피다 울 회사 데싸들은 각자 잘 하는 게 다 달라. 난 그 중에서도 도메인이랑 통계 파트를 맡고 있고. 개발 잘 하시는 분도 있고, 컴공출신 분, DB 설계 잘 하시는 분, 도메인 출중하신 분 등 서로 도와가며 열심히 일함 분석, 모델링, 알고리즘은 확실히 통계 기반이 있어야 한다고..

오늘 데이터사이언스 대학원 합격했다. 다행히 현 직장 팀장님께서는 자기개발을 위한 투자를 적극 장려해주시고, 회사 방침상 대학원 수업 수강과 회사 일이 병행 가능하기에 지원에 큰 고민을 하진 않았다. 이전부터 일을 하면서 학위에 대한 자격지심은 있었는데, 또 까탈스럽게도 통계학(에서 항상 갈팡질팡했지만), 인공지능, 혹은 데이터 블라블라~ 보다 정확히 '데이터 사이언스' 라는 융합분야에 대한, 특히, (지금까지 혼자 야매로 익혔던)모델링 과정에서 아무 생각없이 쓰던 알고리즘과 테크닉들의 아이디어, 그리고 그 기저에 깔린 수학적 지식을 '제대로' 배우고 싶은 의지가 컸기 때문에 대학원 진학을 결정하진 않고 있었다. 그러던 와중 작년 하반기에 대학원 설립 소식을 들었고, 자연스럽게 지원했다. 결정 전 가장 ..

베이지안 A/B 테스트 https://assaeunji.github.io/ 그래프 모델 cs224w 정리 https://tobigs.gitbook.io/tobigs-graph-study/chapter1.-1 pytorch geometric official document https://pytorch-geometric.readthedocs.io/en/latest/notes/introduction.html#data-handling-of-graphs pytorch geometric link prediction tutorial https://github.com/pyg-team/pytorch_geometric/blob/master/examples/link_pred.py pytorch geometric 관련 한국어..

In [1]: %config Completer.use_jedi = False import numpy as np from utils import display_np_arrays_as_images fundamentals: reordering, composition and decomposition of axes operations: rerrange, reduce, repeat In [2]: display_np_arrays_as_images() In [3]: img = np.load('test_images.npy', allow_pickle=False) print(img.shape, img.dtype) (6, 96, 96, 3) float64 In [4]: img[0].shape Out[4]: (9..