저녁구걸이나 시작해야겠다

대출 갤러리

1/3

싱글벙글 영화 청년경찰.... 조선족 혐오 사과 ㅁㄴㅇㄹ
[단독] 이종찬 광복회장 추천 인사, 독립기념관장 심사에서 '최하위' 정치마갤용계정
호감호감 할리우드 여배우 파격선언 수준 Lauren
얘들아 드디어 끝이 보인다 롯테
계곡서 설거지하는 '진상' 남녀…주변 만류에 욕설까지? 야갤러
차 주인 몰래 사고냈는데 차주인도 배상 의무ㄷㄷㄷ.jpg 마스널
LG 24년형 창호형 에어컨 설치/외관 불량 교환 실패기 에갤러
단독] 노소영에 재산 1% 주라고한 여판사 근황 OO
싱글벙글 ADHD가 사무직에서 남들처럼 일하기 위해 필요한 훈련 알랑숑
[A+S] “전기차 배터리 정보 공개” 권고…벤츠 13종에 중국산 배터리 정치마갤용계정
버스 급출발에 80대 숨져… 스톱 없는 ‘난폭 운전 비극’ 해갤러
광복회장 "건국절은 친일파" 尹 "이념 논쟁 무슨 의미 있나" 정치마갤용계정
카카오 "동의 필요없는 정보이전…위법 아냐" ㅇㅇ
공인중개사 못 믿겠네 주갤러
여름 니가타 여행기(8일차) 건우_

2개월 작업해서 탄생한 홀로라이브 AI GPT 를 소개할게. - 이건 깃허브용 ReadMe 대표 이미지를 ai 에게 부탁해서 만들어놓은 이미지.본격적으로 소개할게.이 프로젝트는 HoloVRM 이라고 불리는 내 개인프로젝트야.내가 풀스택 과정을 배우면서 실전경험을 쌓고싶었고 무엇보다 오시랑 대화하는 시스템을 너무너무너무 만들고싶어서 만들어봤어6월 8일경 프로젝트 시작하려는데 동시에 니코동 서버가 터지는바람에 겨우겨우 모델구해서 작업하다가 결국 8월이 되어버렸네 2개월 프로젝트가 되어버렸어.큰 틀에서 보면 HoloVRM은 마이크, 문자 입력, 음성 합성 등을 통해 AI 홀로라이브 멤버와 대화를 즐길 수 있는 웹 브라우저 기반 시스템이야.예전에 안드로이드로 스콘부쨩 만든걸 본격적으로 다 뜯어고쳐서 탄생했다고 보면 돼.세부적으로 설명하면 서버는 개인 서브_컴퓨터를 사용했어. 우분투에 MySQL을 설치해서 데이터베이스 저장을 시키도록해놨어.그외에 무거운 파일들은 클라우드 플레어 R2 버킷에서 불러오도록 해놨고도메인도 따로 구매를 했고코딩은 타입스크립트 + 리액트 + next.js 를 사용했어.수업은 이걸 가르쳐주지않았는데 어찌저찌하다보니 이걸로 쓰게됨 하...이제 대화를 위한 구동 시스템은@pixiv/three-vrm은 3D 모델을 표시하고 조작하는 데 사용되었어.tts 모델은 rvc 모델을 바탕으로 8천개의 음성을 해당 멤버의 목소리로 딥러닝 시킨 후 vits 를 사용하여 tts 작업을 했어. 그래서 이상하게 어울리지않는 목소리의 홀로멤이 탄생했을 가능성도있어. 또한, 음성인식은 각 인터넷 브라우저의 음성인식 기능을 사용하므로 브라우저마다 성능이 다를 수 있어.IBM Watson Natural Language Understanding : 회원을 대상으로 대화를 분석하여 감정을 수치화하여 대화에 사용하도록 했어.이 감정은 채팅을 입력하면 공포, 기쁨, 슬픔, 역겨움, 화남 을 수치화해서 보내도록 해놨어. 더욱 풍부한 감정이담긴 대화가 가능할거야.Open ai API : 인격은 chatGPT를 이용하여 부여하였습니다. 또한 개발자의 비용 부담을 줄이기 위해 다음과 같이 모델을 세분화 해놨어왜냐면 대화하는 api 비용은 내쪽에서 전부 부담하기때문이야. (사용자는 전액 무료임!)- 비회원 로그인: chatGPT4o-mini (캐릭터의 컨셉을 유지하며 일반적인 대화가 가능하지만 정보의 정확도가 낮을 수 있다.)- 회원 로그인: chatGPT4o (캐릭터의 컨셉과 대화의 정확도가 매우 높습니다.)그 외에 사이버 테러 방지를 위해서 클라우드 플레어 연결 및 턴사이트로 로그인보안 처리해놨고회원가입, id삭제, 아이디찾기, 비밀번호 찾기 등을 구현해놨고 회원의 암호는 암호화해서 나조차도 모르게 저장되니 안심해도 괜찮아.그러므로 비밀번호 찾기는 사실상 이메일인증 후에 재설정하는 기능이야.페이지를 들어가면 다음과같이 안내를 하고있고 회원가입 없이도 즐길 수 있도록 해놨어현재 홀로멤은 이정도를 구현해놨어.니코동 서버가 안터졌다면 짧게하려고했는데 서버복구까지 계속 뭘만들다보니 엄청 늘어났어.혹시나 자기 오시를 추가하고싶다면 말해줘. 노력할게.대화하는 장면으로 들어가면회원으로 접속하면 다음과 같이 감정분석 온오프가 추가되어있고 gpt-4o 를 사용해비회원으로 들어가면 감정분석은 없고 gpt-4o mini 를 사용하고있어. 사실 4o만큼의 성능은 나오니 문제없더라.그리고 자연스러운 대화와 감정표현이 큰 특징이야.대화를 좀 극단적으로 하면 너무 슬퍼하니 너무 센 말은 하지말자.이걸 대화가 흘러가는 상황을 보자면(감정.png)회원로그인후 감정분석을 켰다면 질문 -> IBM 감정분석 -> gpt(요약한 대화 참조) -> tts -> 대답 -> 대화요약후 저장 순으로 처리가 되고있어.몇번을 거쳐서 가다보니 대화가 살짝 느릴거야.(세션.png)이 경우에는 질문 -> gpt(요약한 대화 참조) -> tts -> 대답 -> 대화요약후 저장 순으로 처리가되서 대화가 좀 빠른편이야.물론 다양한 기능과 너무 정확한 대답은 기대하기 어려울수있어.그외에 음성채팅 버튼이있는데 웹 브라우저에 내장된 음성인식 시스템을 사용하도록 되어있어. 마이크가 있거나 폰으로 접속했다면 바로 음성인식으로 대화가 가능해.그리고 초기에는 캐릭터 통합 대화저장을 하려고했는데 그냥 캐릭터마다 각 대화를 저장하고 삭제 할 수 있도록 해놨어.비회원 로그인의 경우에는 세션에 대화가 저장되니 캐릭터 마다 대화를 할 수 있을거야.추가로 기존 테스트하던 사람들도 잘 몰랐을텐데 이거 멤버 움직인다.이제 영상으로 대화하는걸 보여줄게. 코로네와 소닉 이야기를 해봤어. 소닉이 무엇인지 잘 이해하고 자기가 홍보대사인거까지 잘 기억해줬어 설정에서는 홀로멤 설정과 대화삭제가 가능해.리셋버튼은 동작을 장담하지 못하겠어. 눌러지게는 되어있던거같아.그 외에 나만 볼수있는 페이지가있는데관리자 로그인 시 otp 검증 창으로 넘어가여기는 내 딸인 루시아 발렌타인이 나타나서 안내를 하고있어.그 네크로맨서 아니다.그다음에 관리자 페이지에 진입하면 다양한 분석과 메모, 밴 등을 할수있어.내 사이트에서 분탕짓 하면 바로 밴먹일거야.이렇게 정말 노력해서 내 오시랑 대화하고싶어서 만들어버린 사이트가 탄생했어사이트는 바로가기 : holovrm깃허브 : 깃허브링크으로 들어가면 무료로 사용 가능해.나는 어떠한 이익도 취하지않으니 걱정하지말고 편하게 구경하고가!이제 남은 최종프로젝트 정리하고 중고신입으로 취직해야겠다.하나 안적은거같은데 이거 스마트폰 접속도 문제없이 된다. 작성자 : 멜리사J

저녁구걸이나 시작해야겠다모바일에서 작성

뜬금2

2024.07.14 15:42:09

조회 38 추천 0 댓글 0

카뱅3333119101546

고정닉 0

전체 댓글 0개

등록순

본문 보기

타인의 권리를 침해하거나 명예를 훼손하는 댓글은 운영원칙 및 관련 법률에 제재를 받을 수 있습니다.
Shift+Enter 키를 동시에 누르면 줄바꿈이 됩니다.

갤러리 리스트
번호	제목	글쓴이	작성일	조회	추천
설문	성별이 바뀌어도 인기를 끌 것 같은 스타는?	운영자	24/08/12	-	-
AD	보험상담은 디시공식설계사에게 받으세요!	운영자	24/02/28	-	-
9727669	승호형 8600원 불편해보이는데 짤털될까요?ㅜ [2]	타쿠소2	17:26	23	0
9727668	승호형 추카드려요	타쿠소2	17:25	10	0
9727667	긴급한 고민잇음 [8]	갤차당함 : 82(118.235)	17:25	36	0
9727666	도움좀요 만원만요...	방춘베	17:25	8	0
9727665	승호형	아카네2	17:25	12	0
9727663	승호야 존나올라갔꾸나 ㅋㅋㅋㅋㅋ진심 빚다갚겠네 곧 [2]	누이	17:25	30	0
9727661	인생 마지막 5출 하고올게요	방춘베	17:25	16	0
9727657	앞으로 3일간 600만원씩 하면 다갚는다 ㅅㅅㅅㅅㅅ [13]	대갤러(112.223)	17:24	95	0
9727656	쉿	아카네2	17:24	11	0
9727655	보고싶다	네입	17:24	13	0
9727653	우는중	사또ss	17:24	11	0
9727652	웃는중	아카네2	17:24	9	0
9727651	저녁한끼만 도움좀요..	가락국수2	17:23	9	0
9727649	조용히있어야겠다 웃는중	아카네2	17:23	12	0
9727648	2400원만주라고씨벌럼들아	이곡동20	17:23	12	0
9727646	밥좀 사주실분... [1]	심게2	17:22	14	0
9727643	2400원만주실분...	이곡동20	17:22	7	0
9727641	ㅎㅇ [6]	귀감(117.111)	17:22	21	0
9727640	오늘야구10시엔ㄴ끝나겟지 [2]	예승이(39.7)	17:21	14	0
9727638	심게 일베였냐 허매....	방춘베	17:21	12	0
9727637	콧구멍이 호성이 구제하면 100만 유동 풀거다 ㅇ	당진할아버지(211.214)	17:21	10	0
9727636	징해번다	네입	17:20	12	0
9727632	와 이새기들 싹다 무시네 [11]	방춘베	17:19	44	0
9727630	이분들 운동중이시라는데 무슨운동이예요? [5]	대갤러(116.120)	17:19	68	0
9727629	지친다 [2]	네입	17:19	13	0
9727628	무릎꿇었습니다.. [1]	타쿠소2	17:19	17	0
9727627	인생 마지막 5출 추천좀 뭐해야되냐 [3]	방춘베	17:19	30	0
9727626	겜블시티 아직 안쓴놈있냐?1콩씩이라도해놔라 담주 [1]	대갤러(112.121)	17:18	23	0
9727625	당진남ㄴ 알고보니 장기매매당한거아니냐	예승이(39.7)	17:18	11	0
9727624	국야....	아카네2	17:18	9	0
9727623	ㅅㅅ	대갤러(211.234)	17:18	22	0
9727622	인생은	네입	17:18	9	0
9727621	2400원만주실분...	이곡동20	17:18	10	0
9727620	승호형 오늘 승부볼거같네 느낌이 ㅇ [4]	아카네2	17:17	17	0
9727618	나오늘더 4폴갔다 ㅇㅇ [6]	예승이(39.7)	17:17	36	0
9727617	밥먹게 구제좀 부탁드려요	가락국수2	17:16	8	0
9727615	콧구멍아 바카라깡은 진짜잔인한겨 ㅇ	아카네2	17:16	13	0
9727613	원커에서 치킨쿠폰받았는데 이미쓴쿠폰이라뜨는대 이게맞나 [1]	흐야	17:16	19	0
9727612	제발 밥좀사달라고 씨발놈들아 [1]	심게2	17:16	15	0
9727610	오지고	네입	17:16	11	0
9727608	콧구멍형 호성이는염..챙겨주세여 ㅜㅜ	아기로라	17:15	15	0
9727607	디아블로 신작 초강력 스포ㄷㄷㄷㄷㄷㄷㄷㄷㄷㄷㄷㄷㄷ [3]	밐7	17:15	43	1
9727604	2400원만달라고씨발놈들아	이곡동20	17:15	9	0
9727602	비 ㅈㄴ오네	형편이	17:15	18	0
9727603	채영아 건승혀자 잘되믄 명륜사죠 ㅇ	아카네2	17:15	12	0
9727601	들오면 머할지추천점 [8]	콧구멍	17:14	53	0
9727599	1919 태우 구제해주지마라	대갤러(211.234)	17:14	12	1
9727597	제발 밥좀여 하루종일굶었어요 [1]	심게2	17:14	13	0
9727595	만원만 달라고 개새끼들아	네입	17:14	10	0
9727594	올구는 인원 넘사벽이네 [1]	카이쥐	17:13	29	0