Unity/Barracuda & Sentis13

• 

  Unity Sentis에서 Tokenizer 구현하기 - CLIP Byte Pair Encoding Byte Pair EncodingUnity Technology서문 지난 포스팅에서 MiniLM에서 어떻게 텍스트를 Tokenizer 하였는지 알아보았다. 결과적으로 Wordpiece 방식은 아니였고 주로 단어의 의미는 좌측에 있기 때문에 우측에서 부터 하나씩 줄여서 탐색하는 방식으로 Wordpiece 방식을 모방한 것으로 확인하였다. 결과적으로 텍스트를 tokenizer해서 무엇을하지 라는 생각을 하였는데 결과적으로 zero-shot 모델을 Unity Sentis 모델에서 실행하는 것을 목표로 해보고자 한다. 우선 Unity Sentis 공식 예제에서 zero-shot 그리고 BPE 샘플 자체가 없기 때문에... BPE 자체만으로도 의미가 있을 수도...? 본문 구현 하면서 가장 어려웠던 점은...사실.. Unity/Barracuda & Sentis 2025. 5. 4.

• 

  [Unity Sentis] Unity에서 Tokenizer 구현하기 - 샘플 조사 TokenizerUnity technologies서문Hugging Face에 보면 Sentis에서 MiniLM을 사용할 수 있도록 샘플데모가 공개되어 있다. unity/sentis-MiniLM-v6 · Hugging FaceThis model is not currently available via any of the supported Inference Providers. The model cannot be deployed to the HF Inference API: The HF Inference API does not support sentence-similarity models for unity-sentis library.huggingface.co 이 중 Tokenizer와 관련된 내용 몇개를 적어보려.. Unity/Barracuda & Sentis 2025. 4. 21.

• 

  [Unity Sentis] 2.x 버전으로 샘플 코드 업그레이드 하기 (실패) SentisUnity Technologies서론 오늘은 가볍게 구버전의 샘플을 2.x 버전으로 업그레이드 하고자 합니다.진행할 버전은 2.1.1 버전이고 샘플은 unity/sentis - Yolov8n을 사용하였습니다. unity/sentis-YOLOv8n · Hugging FaceYOLOv8n validated for Unity Sentis (Version 1.4.0-pre.3*) *Version 1.3.0 sentis files are not compatible with 1.4.0 and will need to be recreated/downloaded YOLOv8n is a real-time multi-object recognition model confirmed to run in Unity 202.. Unity/Barracuda & Sentis 2025. 1. 6.

• 

  [Unity Sentis] Face Landmark 샘플 분석 (+ Sentis 1.6.0 업데이트) Face LandmarkUnity Technologies 서론급하게 Landmark를 테스트 해보았는데 시작부터 되지 않는 부분이 많아서... Sentis를 쓰시는 분이 많을까 싶지만 버그를 찾는 과정을 기록합니다. 본문Landmark란?  관련해서 잘 정리된 글이 있으니 한번 확인해보시길 바랍니다. 간단하게 이야기하면, 얼굴의 특징 점 위치를 각각에 맞게 잡아주기 위해 사용합니다. 사용 사례로는 디지털 휴먼 또는 아바타가 가장 많습니다. 예를 들어서 요즘 인기가 많은 버튜버들이 웃거나 울거나 눈을 깜빡일 때 카메라 output을 input으로 써서 트래킹이 가능하다 라고 설명할 수 있습니다. Facial landmarks with dlib, OpenCV, and Python Facial landmark.. Unity/Barracuda & Sentis 2024. 8. 8.

• 

  [Unity Sentis] ObjectDetection (Yolo v7 tiny) Bounding Box 구현의 이해 서론Uday 2024 발표에 참여하느라 글 작성이 늦게 되었습니다. 이전 글 [Unity Sentis] ObjectDetection Yolo v7 (tiny) 모델 분석하기에서 기본적인 Sentis 사용법과 어떻게 output이 출력되는지 확인하였습니다. [Unity Sentis] ObjectDetection (Yolo v7 tiny) 모델 분석하기 - Onnx excuteSentis yolo v7 tiny Unity Technologies 서론 이전 포스팅인 Object Detection 모델 (Yolo v7 tiny) 실행하기에서 Yolo v7 Tiny 모델을 실행하여, 미리 준비한 동영상을 실행할 수 있는 것을 확인하였습니다. [Unity Sentis]pnltoen.tistory.com (n,7)의.. Unity/Barracuda & Sentis 2024. 6. 8.

• 

  [Unity Sentis] ObjectDetection (Yolo v7 tiny) 모델 분석하기 - Onnx excute Sentis yolo v7 tiny Unity Technologies 서론 이전 포스팅인 Object Detection 모델 (Yolo v7 tiny) 실행하기에서 Yolo v7 Tiny 모델을 실행하여, 미리 준비한 동영상을 실행할 수 있는 것을 확인하였습니다. [Unity Sentis] Object Detection 모델 (Yolo v7 tiny) 실행하기 Yolov7 Unity Technologies 서론 이미 Hugging Face에 Sentis와 Yolov7을 구현한 프로젝트가 있으니 해당 프로젝트 부터 뜯어보겠습니다. unity/sentis-yolotinyv7 at main huggingface.co 전반적인 사용과 관련해서, readme의 pnltoen.tistory.com 하지만, 이러한 .. Unity/Barracuda & Sentis 2024. 4. 15.

• 

  [Unity Sentis] Object Detection 모델 (Yolo v7 tiny) 실행하기 Yolov7 Unity Technologies 서론 이미 Hugging Face에 Sentis와 Yolov7을 구현한 프로젝트가 있으니 해당 프로젝트 부터 뜯어보겠습니다. unity/sentis-yolotinyv7 at main huggingface.co 전반적인 사용과 관련해서, readme의 How to Use를 확인해보면 사용 방법을 확인할 수 있습니다. 하지만 개인적으로 유니티를 처음 사용하는 입장에서 사용이 어렵다고 생각하기 때문에 해당 부분부터 진행해보도록 하겠습니다. 초기 설정 블로깅을 하기전 2023.2.16f1에서 진행하였지만, Reflection Probe의 AABB 문제가 발생하여서 2023.2.17f1에서 진행하도록 하겠습니다. Sentis는 2023.2 이 후의 버전을 지원합니다... Unity/Barracuda & Sentis 2024. 4. 9.

• 

  [Unity Sentis] 유니티 센티스 텐서(Tensor)에 대한 이해 Sentis Tensor Unity Technologies 서론 센티스로 다른 모델을 적용해보고 있습니다. 그 과정에서 유니티에서 텐서를 조작하는 과정이 익숙하지 않아 포스팅을 남깁니다. 본 포스팅은 기본적으로 Unity의 Sentis 1.3.0 버전의 문서를 베이스로 작성되었습니다. 패키지가 업데이트 되는 과정에서 Class 및 함수명이 변경될 수 있음을 말씀드립니다. Sentis overview | Sentis | 1.3.0-pre.1 Sentis overview This is an experimental package in an open beta program available to Unity users via the package manager. The features and documentati.. Unity/Barracuda & Sentis 2023. 11. 22.

• 

  [Unity Sentis] 유니티 센티스를 활용하여 새로운 URP 샘플에 StyleTransfer (AdaIN) 적용기 Unity Sentis Unity Technologies 서론 지금까지 센티스와 관련해서 2가지 포스팅을 제작하였습니다. 첫번째로, Barracuda로 작성한 코드를 Sentis로 migration 하였습니다. 두번째로 동일 기기 GPU에서 사용하였을 때 유니티 프로파일러에서 성능을 비교하였습니다. [Unity Sentis 튜토리얼] Unity Sentis 소개 및 설치 + AdaIN 샘플 소개 Barrcuda → Sentis Unity Technologies 서론 기존에 2가지 포스팅을 진행하면서, Barracuda 패키지의 설치 방법을 알아보았습니다. [Unity Barracuda] 유니티 바라쿠다 튜토리얼 (StyleTransfer-AdaIN) Barracuda Unity Technol pnltoe.. Unity/Barracuda & Sentis 2023. 11. 17.

• 

  [Unity Sentis] 유니티 센티스 성능 비교 + (Feat, 성능 프로파일링과 최적화 리뷰) Unity Sentis Profiling Unity Technologies 서론 이전 Unity Sentis 소개 및 설치 + AdaIN 샘플 소개 글을 작성하고 나서... 바라쿠다와의 성능 비교를 같이 진행하고자 하였다. 하지만 무슨 일인지... 도저히 성능 비교가 생각대로 나오지 않아서 우선 튜토리얼 글만 작성하게 되었다. [Unity Sentis 튜토리얼] Unity Sentis 소개 및 설치 + AdaIN 샘플 소개 Barrcuda → Sentis Unity Technologies 서론 기존에 2가지 포스팅을 진행하면서, Barracuda 패키지의 설치 방법을 알아보았습니다. [Unity Barracuda] 유니티 바라쿠다 튜토리얼 (StyleTransfer-AdaIN) Barracuda Unit.. Unity/Barracuda & Sentis 2023. 11. 10.

• 

  [Unity Sentis 튜토리얼] Unity Sentis 소개 및 설치 + AdaIN 샘플 소개 Barrcuda → Sentis Unity Technologies 서론 기존에 2가지 포스팅을 진행하면서, Barracuda 패키지의 설치 방법을 알아보았습니다. [Unity Barracuda] 유니티 바라쿠다 튜토리얼 (StyleTransfer-AdaIN) Barracuda Unity Technologies 서론 많이 늦어졌지만 Unity Barracuda를 실습해보고자 합니다. 기존 사내에 하늘 같은 그 분께서 AdaIN을 사용하시는 것을 보여주셨는데 해당 내용을 토대로 내용을 진행해보겠 pnltoen.tistory.com 그 이 후 튜토리얼을 만드는 것 보다 하나의 샘플이 있으면 좋다는 생각을 하게 되었고 Unity Technologies Korea의 Senior Software Engineer이신.. Unity/Barracuda & Sentis 2023. 11. 3.

• 

  [Unity Barracuda] 유니티 바라쿠다 튜토리얼 (StyleTransfer-AdaIN) Barracuda Unity Technologies 서론 많이 늦어졌지만 Unity Barracuda를 실습해보고자 합니다. 기존 사내에 하늘 같은 그 분께서 AdaIN을 사용하시는 것을 보여주셨는데 해당 내용을 토대로 내용을 진행해보겠습니다. 본문 모델 선정 naoto0804/Pytorch-AdaIN GitHub - naoto0804/pytorch-AdaIN: Unofficial pytorch implementation of 'Arbitrary Style Transfer in Real-time with Adaptive Inst Unofficial pytorch implementation of 'Arbitrary Style Transfer in Real-time with Adaptive Instance .. Unity/Barracuda & Sentis 2023. 4. 10.