앙상이 친구 없는 거 같긔

빈센조 갤러리

1/3

메이플 페미 개발진 기싸움 근황.jpg 왕구리
왜 유럽과 미국은 격차가 나게 되었을까? 싱붕이
돌려차기 사건 또 터졌긔 ㅇㅇ
한녀가 양남 만나면 받는 대우 ㅇㅇ
전세계적으로 윈도우 블루스크린 에러 뜨고 있대 ㅇㅇ
란마 신작 애니 VS 원작 장면 비교 쇼핑봉투
(블라)바람핀 아내에게 무릎 꿇고 빈 남자.blind 태아령
싱글벙글 한국인이 만든 커피벽돌..jpg 아린퍄퍄
서구 주도 세계질서가 흔들리고 있는 이유... 싱붕이
교사인데 요새 애들 진짜 심해요.jpg ㅇㅇ
악의 총통의 사악한 음모 만화 우동닉ㅇㄱㄹㅇ
컵에서 컵으로 음료를 따를 때 왜 꼭 흘리게 되는 걸까? ㅇㅇ
[JTBC] '임성근 구명로비 의혹' 보도에…국민의힘 "제보공작" 정치마갤용계정
카드깡으로 무려 55억 챙긴 20대 사기꾼 긴급체포..jpg 몽쉘통통
싱글벙글 외국인한테 군고구마에 우유 먹이기...jpg 빠요엔

라이브 비디오를 실시간 스타일 변환하는 'Live2Diff' 등장 https://www.aitimes.com/news/articleView.html?idxno=161703 라이브 비디오를 실시간 스타일 변환하는 AI 도구 등장 라이브 비디오 스트림을 즉시 애니메이션으로 변환하는 인공지능(AI) 도구가 나왔다. 기존과는 다른 '단방향 어텐션 모델링(uni-directional attention modeling)' 방식으로 성능을 높였다는 설명이다. 벤처비트는 17일(현지시간) 상하이 AI연구실과 막스 플랑크 정보학연구소, 난양이공대학교 연구진이 라이브 비디오 스트림을 실시간으로 스타일 변환하는 AI 도구 ‘라이브2디프(Live2Diff)’ 논문을 아카이브에 게재했다고 전했다.라이브2디프는 라이브 비디오 스트림 처리를 위한 비디오 확산(diffusion) 모www.aitimes.com라이브 비디오 스트림을 즉시 애니메이션으로 변환하는 인공지능(AI) 도구가 나왔다. 기존과는 다른 '단방향 어텐션 모델링(uni-directional attention modeling)' 방식으로 성능을 높였다는 설명이다. 벤처비트는 17일(현지시간) 상하이 AI연구실과 막스 플랑크 정보학연구소, 난양이공대학교 연구진이 라이브 비디오 스트림을 실시간으로 스타일 변환하는 AI 도구 ‘라이브2디프(Live2Diff)’ 논문을 아카이브에 게재했다고 전했다.라이브2디프는 라이브 비디오 스트림 처리를 위한 비디오 확산(diffusion) 모델에 단방향 어텐션 모델링을 구현한 첫번째 사례로 소개됐다.일반적으로 비디오 확산 모델은 기반이 되는 트랜스포머 아키텍처의 기본 구성 요소인 어텐션 메카니즘의 양방향 특성 때문에 라이브 비디오 스트림에 대한 실시간 처리가 불가능하다. 일반적으로 문장 속 단어와 같은 순차 데이터를 학습해 맥락과 의미를 추적하는 트랜스포머 모델은 서로 떨어져 있는 데이터 요소들의 관계를 이해하는 데 어텐션 메커니즘을 사용한다.이런 트랜스포머의 어텐션 메커니즘을 라이브 비디오에 적용할 경우, 비디오 프레임 간의 관계를 이해하기 위해 과거 프레임과 미래 프레임 모두에 대해 시간적으로 양방향 처리가 필요하다. 특히 미래 프레임을 처리를 위해서는 지연이 불가피하다.이 문제를 해결하기 위해 라이브2디프는 각 프레임에 대해 미래 프레임 없이 과거 프레임과 몇 개의 초기 워밍업 프레임만 연관시켜 시간이 흘러도 일관성을 유지하는 단방향 어텐션 모델링을 도입했다.연구진은 "우리의 접근 방식은 미래 프레임 없이도 시간적 일관성과 자연스러움을 보장한다”라며 “이는 실시간 비디오 번역 및 처리를 위한 새로운 가능성을 열어준다"라고 설명했다.특히 이 기술은 엔비디아 '4090 GPU'와 같은 일반 소비자 하드웨어에서 초당 16프레임의 속도로 비디오를 실시간 온디바이스 처리하도록 최적화됐다.연구진은 실시간 웹캠 입력을 사용해 얼굴을 애니메이션 스타일 캐릭터로 변환하는 라이브2디프의 능력을 시연했다. 광범위한 실험 결과, 라이브2디프가 시간적 일관성과 자연스러움에서 기존 방법을 능가한다는 것을 양적 측정 및 사용자 연구에서 확인했다고 전했다.라이브2디프는 엔터테인먼트 산업에서 실시간 스트리밍과 가상 이벤트를 재정의할 수 있는 잠재력을 가지고 있다는 평이다.증강 현실(AR)과 가상 현실(VR) 분야에서 몰입형 경험을 향상할 수 있고, 실시간 스타일 전송을 통해 실시간 비디오 피드에서 현실 세계와 가상 환경 간의 간극을 줄일 수 있다. 또 게임이나 가상 투어, 건축 및 디자인과 같은 전문 분야에서도 응용될 수 있다.연구진은 라이브2디프의 전체 코드를 곧 오픈 소스로 공개할 계획이다.https://arxiv.org/html/2407.08701v1 Live2Diff: Live Stream Translation via Uni-directional Attention in Video Diffusion Models Live2Diff: Live Stream Translation via Uni-directional Attention in Video Diffusion Modelsarxiv.org 작성자 : ㅇㅇ

앙상이 친구 없는 거 같긔앱에서 작성

ㅇㅇ(1.245) 2024.07.09 00:43:22

조회 243 추천 6 댓글 3

고정닉 0

원본 첨부파일 1

binsenjo-20240708-235944-000.jpg

전체 댓글 0개

등록순

본문 보기

타인의 권리를 침해하거나 명예를 훼손하는 댓글은 운영원칙 및 관련 법률에 제재를 받을 수 있습니다.
Shift+Enter 키를 동시에 누르면 줄바꿈이 됩니다.

갤러리 리스트
번호	제목	글쓴이	작성일	조회	추천
설문	흡연때문에 이미지 타격 입은 것 같은 스타는?	운영자	24/07/15	-	-
이슈	[디시人터뷰] '좋아해요'로 마음을 사로잡은 배우 최하슬	운영자	24/07/17	-	-
공지	빈센조 갤러리 이용 안내 [7]	운영자	21.03.05	13151	5
996445	망고나 먹으러 가	ㅇㅇ(118.235)	05:51	1	0
996444	근데 조회수 좋아요같은거 의미없다 조작이 너무쉽네..	빈갤러(175.116)	05:51	8	0
996443	언냐들은 스워 왜하긔	ㅇㅇ(211.234)	05:51	15	2
996442	서세원 고발되면 김규빈헬지가 제일 먼저 잡혀갈텐데 [1]	ㅇㅇ(118.235)	05:50	9	2
996441	갑자기 갤 조용해진 것 봐	ㅇㅇ(211.234)	05:50	17	3
996440	작스틴 신곡 짭끨 음색 좋다	ㅇㅇ(223.62)	05:50	5	0
996439	아니 서세원 솔직히 그 똠붕이 뭐가 까인다고	ㅇㅇ(118.235)	05:49	20	3
996438	.	ㅇㅇ(118.235)	05:49	20	2
996437	요새 그냥 잠잠하니까 김규빈줌들	ㅇㅇ(118.235)	05:48	11	1
996436	짱손 내일 뒤지든말든 관심도 없는데	ㅇㅇ(106.101)	05:48	28	3
996435	리대 차기 나오면 진짜 얼마나 이간질할까	ㅇㅇ(223.39)	05:48	28	4
996434	와보크트언냐가 막글을 먹는군아	ㅇㅇ(118.235)	05:47	10	0
996433	망고따개빠는년아 [1]	ㅇㅇ(118.235)	05:47	21	2
996432	뎅륶조회수 추이보니까	빈갤러(175.116)	05:47	36	2
996431	헬지 걔도 똠붕이 빨긔	ㅇㅇ(118.235)	05:46	10	2
996430	와보크트야 가서 와보 실물후기나 구걸해	ㅇㅇ(118.235)	05:45	19	1
996429	사랑하면 같이 김규빈팬 패주시긔	ㅇㅇ(118.235)	05:44	15	5
996428	오늘 짱손플에 리대 끌고온 헬지년 [3]	ㅇㅇ(223.39)	05:44	84	10
996427	와보크트언냐	ㅇㅇ(211.234)	05:44	16	4
996426	짱깨 패는건 누가해도 무죈데 [3]	ㅇㅇ(118.235)	05:44	42	7
996425	김규빈스크클리너아줌마	ㅇㅇ(118.235)	05:44	12	2
996424	가끔 공수치오는짓하는 언냐들 볼때 뭔가 나보다	ㅇㅇ(211.234)	05:44	16	0
996423	와보크트 ㄹㅇ징하다	ㅇㅇ(118.235)	05:43	10	0
996422	서세원 끌고오는 헬지 언냐들? [2]	ㅇㅇ(211.234)	05:43	61	10
996421	난 못팰이유가 없고	ㅇㅇ(118.235)	05:43	23	3
996420	박건욱 아줌마야 너 시끄럽다고 ㅋㅋㅋ	ㅇㅇ(223.38)	05:42	14	2
996419	리대 현수막을 시발 누가 기억한다고ㅋㅋㅋㅋㅋㅋㅋ [5]	ㅇㅇ(223.39)	05:42	92	14
996418	두꺼비빠는 짹창년들 머단한게 [2]	ㅇㅇ(118.235)	05:42	34	2
996417	서세원 장작넣는 헬지 셉두창은 말하는것도 경지같아서	ㅇㅇ(106.101)	05:41	38	7
996416	지금도 김규빈클리너는 정신못차리고 계속	ㅇㅇ(118.235)	05:41	19	2
996415	온냐들 이거 개추좀 [3]	ㅇㅇ(118.235)	05:41	62	2
996414	아옵먼이 뭔지 몰라서 보고왔긔	ㅇㅇ(117.111)	05:40	33	3
996413	릌괘 대형 이동하고 안무 연결할때 손동작이 노무 좋음	【도릌괘】(220.76)	05:40	6	0
996412	리대 탈빠문	【도릌괘】(220.76)	05:40	25	3
996411	서세원 스워 결론 내드림	【도릌괘】(220.76)	05:40	11	0
996410	젖괴들아 즉른이 어때	ㅇㅇ(39.7)	05:39	31	8
996409	걍 와보는 비서세원창들이 더 잘팸	ㅇㅇ(223.38)	05:39	51	10
996408	미안한데 이글이 틀린말이 있어? 짱깨년들아 [1]	ㅇㅇ(211.36)	05:39	55	6
996407	와 진짜 셉두창이랑 엮이면 안된다는거 느낌 [3]	ㅇㅇ(211.234)	05:39	82	9
996406	알티 태운년 패려면 짹갔다고 말했다	ㅇㅇ(118.235)	05:38	59	7
996405	은은한 와쏜스워는 뭐니? [1]	ㅇㅇ(118.235)	05:38	23	3
996404	새끼가 못생기면 애미가 미치는구나	ㅇㅇ(106.101)	05:38	28	1
996403	결국 얘네들이 다 비서세원창이란건 알긴하네	ㅇㅇ(223.38)	05:38	39	5
996402	저 젖괴들 음침한게 [2]	ㅇㅇ(223.38)	05:38	84	10
996401	아오 이년들아 좀 끝내라	ㅇㅇ(118.235)	05:37	22	1
996400	이글 땜에 스워난거야	ㅇㅇ(211.36)	05:37	29	0
996399	그냥 성괴빈 톤그로에 폼 좆같아져서	ㅇㅇ(223.39)	05:37	54	12
996398	저 스크놈 한남젖괴 아님 짱깨야	ㅇㅇ(211.234)	05:37	35	8
996397	자기 짱깨 패는줄 알고 튀어나온게 맞아보여	ㅇㅇ(118.235)	05:36	31	7