[📪정보] 차세대 이미지 저장 방식이 될 수 있는 Image-GS

[익명(curtain1626)]

https://youtu.be/_WjU5d26Cc4

2D 가우시안 스플래팅으로 이미지를 압축한 방법론에 대한 논문 Image-GS 가 최근 발표됨

가우시안 스플래팅이란?

가우시안 스플래팅 (Gaussian Splatting)이란 최근 컴퓨터 그래픽 분야에서 가장 각광받는 개념임

단지 사진 수십 장을 찍는 정도로 매우 사실적인 3D 공간 재현이 가능한 기법으로 

동시에 4090 정도의 단일 GPU로 수십 ~ 수백 FPS로 렌더링 가능해 미래 게임, AR 등 많은 그래픽 분야에서 미래 기술로 각광받고 있음

간단하게 원리를 설명하면 수천~수만개의 뿌연 물감 구름들(가우시안)들을 이용해서 입력한 여러 시점의 사진들을 잘 재현하도록 각 구름의 위치와 특성을 최적화 하는것임

기존 NeRF 같은 방법론들과 비교해서 압도적으로 빠른 학습시간과 실시간 재생이 가능할정도의 렌더링 속도, 압도적인 표현력을 가지고 있음

그리고 이 논문은 이걸 이미지를 압축하는 방식으로 시도를 함

픽셀로 이루어진 이미지를 픽셀 또는 픽셀 블록단위로 인코딩하는 JPEG, PNG 같은 파일 방식은 이미지 해상도가 커질수록 이미지 용량 크기도 같이 늘어나고 특히 JPEG같은 경우 데이터손실이 크지만

가우시안 스플래팅은 이미지를 가우시안 정점들을 저장하기 때문에 디코딩시 표현능력의 손실을 비교적 적게 가지면서 해상도를 자유롭게 설정할 수 있음

이는 벡터 이미지와도 유사한 측면이 있는데, 가우시안 스플래팅은 벡터 방식과 픽셀 방식의 어느정도 중간지점에 있다고 볼 수 도 있을 것 같음

[호크아이모코코(crew1950)]

방식은 참신한데 그러면 컬러데이터 어떻게 보존하지? 픽셀 압축하면 색상손실 꼭 있듯이 여기선 그거도 어케 다루냐가 관점이고

[호크아이모코코(crew1950)]

가우시안이란 개념 하나만으로 저문제 걱정안하게 알아서 해주나?

[국밥너무비싸(slip0758)]

픽셀 하나라도 중요한 분야에서는 기존 방식 쓰고 대충 그럴싸해 보여도 상관 없는 일상 사진 같은거라든지 그런데서는 저 방식 쓰고 그러려나

[행복한천국으로(adjust7431)]

[이세이미야케(jkwarawara)]

[약팔이아님(vital7966)]

미쳤네 근데 가우시안이 최적이려나? 그런건 논문에서 알아서 다 분석해놨으려나

[ㅇㅇ 2(118.37)]

허세는;

[약팔이아님(vital7966)]

@ㅇㅇ2(118.37) 아는만큼 보인다

[ㅇㅇ 4(121.165)]

@ㅇㅇ2(118.37) 이게 왜 허세노

[ㅇㅇ 6(169.211)]

@ㅇㅇ2(118.37) 이 샠기 커널이 뭔지도 모를 듯

[익명(220.119)]

@ㅇㅇ2(118.37) 가우시안이 허세라니? 통계학의 중심극한정리, 정보이론의 최적 엔트로피, 신호처리의 안정 커널, 양자역학의 최소불확정 상태, 뇌 시각피질의 리셉티브 필드까지 모두 가우시안이 기본이다. 픽셀 블록 기반 JPEG·AVIF를 넘어 Image-GS가 분포 기반으로 이미지를 저장한다는 건 단순 포맷이 아니라 지각·물리·정보과학 전체 패러다임 전환이다. 허세가 아니라 필연적 통찰이다.

[ㅇㅇ 1(58.120)]

뭐라는지 하나도 못알아듣겠노

[바다기린(hancomputer)]

[냥쓰(kalstein)]

약간 포인트들 정보만 저장하고 나머진버리고 나중에 재구성하나보네요. 자연의 색상분포는 가우시안이긴 할테니까요. - dc App

[ㅇㅇ 3(14.37)]

픽셀방식 = 모래알갱이 하나하나에 데이터 박제해서 끼워놓음 가우시안방식 = 물과 잉크로 분리해놓고 필요할때 똑 떨궈서 쫙 퍼트림 25배압축됨 대충이런건가

[ㅇㅇ 5(183.101)]

지금은 단순하게 정점과 정점을 추론해서 중간을 매꾸는 단계이므로, 상상이 많이 포함되어 원본과는 다른 결과를 출력함.

[ㅇㅇ 5(183.101)]

단, 원본은 명확하다는 하에 끝없이 확대할 수 있다는 장점이 있으므로, 파일크기 보다는 너의 컴퓨터에 연산력에 의존해 추측을 하는거라 보면 됨.

[ㅇㅇ 7(115.126)]

dpi 낮게 줄태니까 니가 알아서 채워라 ㅇㅇ 이 방식인거?

[노력(dollar2000)]

대신 저 압축 데이터를 노출하려면 같은 기술로 디코딩해줘야 할텐데 웹에서는 못쓰겠는데? - dc App

[초코냥(tempo1924)]

표준이야 만들면됨 - dc App

[초코냥(tempo1924)]

좆되네 저거보니 점점 가우시안 스플래팅이 렌더링 표준으로 자리잡을드ㅛ - dc App

[광주좌파페미캣맘촉법소녀(transformation)]

픽셀분포가 가우시안이라는 가정하에서만 높은 효율성 보여주는거아님? 뭔가 제약조건이 있을것같은데