갤러리 이슈박스, 최근방문 갤러리
연관 갤러리
빈센조 갤러리 타 갤러리(0)
이 갤러리가 연관 갤러리로 추가한 갤러리
0/0
타 갤러리 빈센조 갤러리(0)
이 갤러리를 연관 갤러리로 추가한 갤러리
0/0
개념글 리스트
1/3
- “욱일기 벤츠 女차주, 스티커 찢자 신고” 계속되는 목격담 ㅇㅇ
- 싱글벙글 방금 새 유튜브 업로드한 북한 레지스탕스 채널 ㅇㅇ
- 싱글벙글 한국인이 만든 커피벽돌..jpg 아린퍄퍄
- 우리 나라 이름이 대한민국인 이유 새벽달빛
- 요즘 신작 애니들 수준 싱갤러
- 국제결혼을 반대하는 한국 여성들이 당할 일 주갤러
- 중국의 이동식 쇼파 의상 ㅋㅋ ㅇㅇ
- [ESPN] 21세기 최고의 프로 운동선수 TOP 100 leomessi
- 문체부, 축구협회 ....장미란이 직접 감사 ㅇㅇ
- 외래종 라이언피쉬 잡아서 회 떠먹는 유튜버.jpg 감돌
- 충격적인 프롬의 진실 ㅇㅇ
- 중국인들이 이웃에 살면 생기는 일들 ㄷㄷ ㅇㅇ
- 최근, 자신의 호텔 리뷰한 유튜버를 저격한 호텔 사장.jpg ㅇㅇ
- 싱글벙글 중국 겟앰프드가 채팅을 칠 수 없게 된 이유 ㅇㅇ
- 몇시간전, 일본 사이타마현 가와구치시의 아파트에서 폭발사고 ㅇㅇ
中, 한국 올림픽 대표팀 단복은 더글로리 연진이 죄수복... 황당한 조롱
- 관련게시물 : “연진이 죄수복이냐?”… 한국 대표팀 단복에 중국서 쏟아진 조롱... 다들 몽골 단복 예쁘다고 서로 칭찬해주기 바쁜 이 때 갑툭튀한 노근본 짱깨새끼들은 더 글로리 불법 시청을 자랑이라도 하듯이 짖어대네? 대체 짱깨 단복은 얼마나 잘 뽑혔으면 천지분간 못하고 저러고 있는 걸까? ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ 단복 디자인 재탕에 못생겼다고 비난받고 성차별 이슈까지 터져서 총체적 난국 게다가 정장 컨셉 겹친 한국한테 비교당하니까 빡쳐서 불법시청을 통해 연진론을 들고 나왔다고 함 ㅉㅉㅉ 그와중에 짱깨새끼들 유니폼도 저 후줄근한 디자인 재탕함 ㅋㅋㅋㅋㅋㅋ 그냥 여성 선수들도 바지 좀 입히라고... 변태로 오해 받아서 잡혀갈라 ㅋㅋㅋ
작성자 : 난징대파티고정닉
라이브 비디오를 실시간 스타일 변환하는 'Live2Diff' 등장
https://www.aitimes.com/news/articleView.html?idxno=161703 라이브 비디오를 실시간 스타일 변환하는 AI 도구 등장 라이브 비디오 스트림을 즉시 애니메이션으로 변환하는 인공지능(AI) 도구가 나왔다. 기존과는 다른 '단방향 어텐션 모델링(uni-directional attention modeling)' 방식으로 성능을 높였다는 설명이다. 벤처비트는 17일(현지시간) 상하이 AI연구실과 막스 플랑크 정보학연구소, 난양이공대학교 연구진이 라이브 비디오 스트림을 실시간으로 스타일 변환하는 AI 도구 ‘라이브2디프(Live2Diff)’ 논문을 아카이브에 게재했다고 전했다.라이브2디프는 라이브 비디오 스트림 처리를 위한 비디오 확산(diffusion) 모www.aitimes.com라이브 비디오 스트림을 즉시 애니메이션으로 변환하는 인공지능(AI) 도구가 나왔다. 기존과는 다른 '단방향 어텐션 모델링(uni-directional attention modeling)' 방식으로 성능을 높였다는 설명이다. 벤처비트는 17일(현지시간) 상하이 AI연구실과 막스 플랑크 정보학연구소, 난양이공대학교 연구진이 라이브 비디오 스트림을 실시간으로 스타일 변환하는 AI 도구 ‘라이브2디프(Live2Diff)’ 논문을 아카이브에 게재했다고 전했다.라이브2디프는 라이브 비디오 스트림 처리를 위한 비디오 확산(diffusion) 모델에 단방향 어텐션 모델링을 구현한 첫번째 사례로 소개됐다.일반적으로 비디오 확산 모델은 기반이 되는 트랜스포머 아키텍처의 기본 구성 요소인 어텐션 메카니즘의 양방향 특성 때문에 라이브 비디오 스트림에 대한 실시간 처리가 불가능하다. 일반적으로 문장 속 단어와 같은 순차 데이터를 학습해 맥락과 의미를 추적하는 트랜스포머 모델은 서로 떨어져 있는 데이터 요소들의 관계를 이해하는 데 어텐션 메커니즘을 사용한다.이런 트랜스포머의 어텐션 메커니즘을 라이브 비디오에 적용할 경우, 비디오 프레임 간의 관계를 이해하기 위해 과거 프레임과 미래 프레임 모두에 대해 시간적으로 양방향 처리가 필요하다. 특히 미래 프레임을 처리를 위해서는 지연이 불가피하다.이 문제를 해결하기 위해 라이브2디프는 각 프레임에 대해 미래 프레임 없이 과거 프레임과 몇 개의 초기 워밍업 프레임만 연관시켜 시간이 흘러도 일관성을 유지하는 단방향 어텐션 모델링을 도입했다.연구진은 "우리의 접근 방식은 미래 프레임 없이도 시간적 일관성과 자연스러움을 보장한다”라며 “이는 실시간 비디오 번역 및 처리를 위한 새로운 가능성을 열어준다"라고 설명했다.특히 이 기술은 엔비디아 '4090 GPU'와 같은 일반 소비자 하드웨어에서 초당 16프레임의 속도로 비디오를 실시간 온디바이스 처리하도록 최적화됐다.연구진은 실시간 웹캠 입력을 사용해 얼굴을 애니메이션 스타일 캐릭터로 변환하는 라이브2디프의 능력을 시연했다. 광범위한 실험 결과, 라이브2디프가 시간적 일관성과 자연스러움에서 기존 방법을 능가한다는 것을 양적 측정 및 사용자 연구에서 확인했다고 전했다.라이브2디프는 엔터테인먼트 산업에서 실시간 스트리밍과 가상 이벤트를 재정의할 수 있는 잠재력을 가지고 있다는 평이다.증강 현실(AR)과 가상 현실(VR) 분야에서 몰입형 경험을 향상할 수 있고, 실시간 스타일 전송을 통해 실시간 비디오 피드에서 현실 세계와 가상 환경 간의 간극을 줄일 수 있다. 또 게임이나 가상 투어, 건축 및 디자인과 같은 전문 분야에서도 응용될 수 있다.연구진은 라이브2디프의 전체 코드를 곧 오픈 소스로 공개할 계획이다.https://arxiv.org/html/2407.08701v1 Live2Diff: Live Stream Translation via Uni-directional Attention in Video Diffusion Models Live2Diff: Live Stream Translation via Uni-directional Attention in Video Diffusion Modelsarxiv.org
작성자 : ㅇㅇ고정닉
차단하기
설정을 통해 게시물을 걸러서 볼 수 있습니다.
댓글 영역
획득법
① NFT 발행
작성한 게시물을 NFT로 발행하면 일주일 동안 사용할 수 있습니다. (최초 1회)
② NFT 구매
다른 이용자의 NFT를 구매하면 한 달 동안 사용할 수 있습니다. (구매 시마다 갱신)
사용법
디시콘에서지갑연결시 바로 사용 가능합니다.