지속 가능한 꾸준함

https://huggingface.co/spaces/ydshieh/Kosmos-2 Kosmos 2 - a Hugging Face Space by ydshieh huggingface.co https://github.com/microsoft/unilm/tree/master/kosmos-2 아래 건 좀 failure case, 여러 사람이 있다고 했다가 또 없다고 한다. 와우... 성능이 어마어마하다. 재밌는 점은 카카오브레인에서 구축한 COYO-700M 데이터셋이 학습 데이터로 활용되었다고 한다. https://github.com/kakaobrain/coyo-dataset GitHub - kakaobrain/coyo-dataset: COYO-700M: Large-scale Image-Text Pair Da..

출장 및 날씨 때문에 2주 정도 못하다가 오랜만에 몰아서 레슨 받았다! 무게 중심을 뒤에서 앞으로 이동해주는 것 신경쓰기 뒤로가면서 치지말고 미리 뒤로 가서 자리 잡을 것 치고 나서 서 있는 위치에 따라 발리 포지션이나 서브라인으로 복귀하기!

발리 배운지 1~2개월은 된 거 같은데 아직도 정말 잘 안된다. 백핸드랑 포핸드는 무인 연습장에서 연습해서 그런가 습득이 빨랐는데 발리는 그러지 못하고 있다. 동작만 보면 날라오는 공에 라켓 갖다 대는 거라 쉽게만 생각했는데 영 감이 안잡힌다. 내 문제는 라켓을 갖다 댈때 내 얼굴도 너무 공쪽으로 붙이는 것이고, 몸도 좀 옆으로 틀어서 갖다 대야하는데 몸이 너무 정면을 바라본다는 것... 백 쪽은 괜찮은데 프론트 쪽이 잘 안된다. 그리고... 같은 사내 테니스 동호회분의 퇴사 소식을 들었다 ㅜㅜ 팀은 다르지만 동호회 활동을 하며 뭔가 친밀감이 생겼는데 떠나신다니 아쉽다.

나비처럼 날아 벌처럼 쏜다. 설명: 우산을 쓰고 포핸드를 치는 장면 이런 이미지는 현 시대의 이미지 생성 AI 모델들도 생성이 어렵지 않을까 싶다. 한 번 해보자 https://huggingface.co/spaces/stabilityai/stable-diffusion Stable Diffusion 2-1 - a Hugging Face Space by stabilityai huggingface.co 프롬프트는 A tennis player holding an umbrella while doing a forehand 로 입력했다. 아직 어려운가보다.

마지막 장면에서 그냥 넘기지 말고 끝까지 두 사람의 미세한 움직임을 잘 봐야한다. 드라마 완주를 잘 못하는 편인데 비프는 1화를 보자마자 2주 정도에 걸쳐서 조금씩 천천히 극이 점점 달아오르는 속도에 맞춰 마지막에 쭉 몰아봤다.

트랜스포머의 Decoder Block을 포함하는 모델을 ONNX로 변환하려했다. 이미 작년에 개발한 모델이였고, ONNX 변환도 잘됐던 모델이다. 그런데 갑자기 안된다...! Torch 2.x 버전 지우고 1.x 버전으로 설치하니 됐다. 크흠...

회사에서 챗지피티를 지원해주어서 개인 구독은 당분간 중단한다. 코파일럿도 지원해주어서 코파일럿도 취소해야겠다. 아앗... 1년치 결제해서 지금 취소해봤자구나...

음... 대체로 논문을 보면 weight decay 를 높게 세팅하는 경우가 좀 있는 거 같다. 당장 다른 논문이 생각안나지만, 당장 pytorch adamw 의 weight decay parameter 의 default 값이 0.01 로 세팅 돼있다. 0.01 이랑 0.1 이란 수치가 높은 값이냐 작은 값이냐는 따질 수 없지만 내가 개인적으로 실험을 해봤을때는 0.01 보다 크게 설정했을때 적어도 validation set 에서는 성능이 저하되는 경우가 많았던 거 같다. 그런데 sam은 wd 값을 0.1 로 세팅했다고 하니 다시 한 번 이에대한 실험을 진행해봐야겠다.

https://developer0hye.tistory.com/598 20230706 최고 월간 방문수 경신 및 누적 방문수 6만 돌파 https://developer0hye.tistory.com/557 20230503 최고 월간 방문수 경신 https://developer0hye.tistory.com/516 20230401 최고 월간 방문수 경신 기존: 3,755 신: 4,197 developer0hye.tistory.com developer0hye.tistory.com 근 두달간 챗지피 developer0hye.tistory.com