Edge AI
-
구글, 초고효율 AI, Gemma 3 270M 공개Milkyway/IT Planet 2025. 8. 25. 08:11
구글이 Gemma 3 270M 모델을 공개했습니다. 이 모델이 시사하는 바가 좀 있어서, 의견 보태봅니다.이 모델 자체는 사이즈 대비 성능이 우수하지만, 그렇다고 하더라도 사실성, 추론 등에서는 더 큰 모델 대비 성능이 좋은 건 아닙니다. 어떤 면에서는 꽤 떨어지죠.이 모델이 의미가 있는 것은 "특정한 목적으로 제한하여 파인튜닝한 경우" 해당 목적에 한해서는, 굉장히 에너지 효율적이고 빠르고 정확하다는데 있습니다.특히, 로컬에서 충분히 돌릴 고도 남을 만큼 가볍기 때문에, 현재 잘 안되고 있는 스마트폰/PC에 대한 음성 제어 기능같은 것들을 수행하기에 최적의 모델이기도 합니다.사용자 인풋을 이 모델이 먼저 받아서, 로컬에서 처리할지, 특정 기능을 수행할지, 혹은 클라우드의 대형LLM으로 보낼지를 이 작은..