2025년 3월 30일 일요일

Python의 requests 큰파일 다운로드시 처리 방법

 requests 사용시 아무 생각 없이 사용하곤 했었습니다. 그런데 어느 순간 thread가 강제 종료 되는 현상이 발생하였습니다. 구체적인 사유는 없는데 큰파일 다운로드시 발생하는 증상이 었습니다. 제가 사용할때는 ubuntu에서 3G 크기의 파일이었습니다.

메모리 부족 같아서 검색해보니 stream을 사용해야 한다고 합니다.

GPT를 이용해서 가이드를 받아서 코드를 수정했지만 사유없이 종료되는 경우 메모리 부족을 의심하시기 바랍니다.


import requests


url = 'https://example.com/largefile.zip'  # 다운로드할 파일의 URL

file_name = 'largefile.zip'  # 저장할 파일 이름


# 청크 단위로 다운로드

with requests.get(url, stream=True) as response:

    response.raise_for_status()  # 요청이 성공했는지 확인

    with open(file_name, 'wb') as file:

        for chunk in response.iter_content(chunk_size=8192):  # 8KB 단위로 읽기

            file.write(chunk)


print(f"{file_name} 다운로드 완료.")



2025년 3월 3일 월요일

stable diffusion webui with amd gpu

 RX 7700 XT GPU를 가지고 windows에서 stable diffusion을 동작시키기 위한 시행 착오에 대해서 정리해보았습니다.

누군가는 동일한 시행 착오를 격지 않길 바라는 마음에 정리를 해보았습니다.

따라하지 마시고 끝까지 다읽어 보시는걸 추천 드립니다. 


NVIDIA의 막강한 무기가 CUDA인걸 모르는지 시간이 많이 지났음에도 AMD의 개발 환경은 여전히 쉽지 않았습니다.

요즘 딥러닝하면 pytorch를 많이 사용합니다. 그래서 pytorch site에서 설치하는 방법을 살펴 보았습니다.

여기에서부터 고행은 시작되었습니다.

 


ROCm(Radeon Open Compute)은 AMD에서 개발한 오픈 소스 기반의 GPU 컴퓨팅 플랫폼입니다. 이는 NVIDIA의 CUDA와 유사한 개념으로, AMD GPU에서 고성능 병렬 컴퓨팅을 수행할 수 있도록 설계되었습니다.
ROCm 이 Windows 에서 설치가 불가능 하였습니다.

Linux 에서는 설치가 가능했기 때문에 WSL을 이용해서 설치를 시도하였습니다.

**WSL(Windows Subsystem for Linux)**은 Windows에서 직접 Linux 환경을 실행할 수 있도록 하는 기능입니다.
즉, 가상 머신(VM) 없이 Windows에서 Linux 명령어, 도구, 애플리케이션을 사용할 수 있도록 지원하는 Microsoft의 서브시스템입니다.


아래를 참고해서 6.1.3 버전을 설치하였습니다.

https://www.reddit.com/r/ROCm/comments/1ep4cru/rocm_613_complete_install_instructions_from_wsl/

문제는 여전히 CUDA를 인식하지 못하는 이슈가 있었습니다.

다시 아래 AMD의 WSL 가이드를 이용하여 ROCm 6.2.3 버전 설치를 시도 하였습니다.

https://rocm.docs.amd.com/projects/radeon/en/latest/docs/install/wsl/install-radeon.html

여전히 unsupported GPU라고 뜹니다.

여기저기 찾아보니 내장 그래픽 카드를 off 하라고 해서 BIOS에서 Off 설정을 해보았지만 여전히 동일하였습니다.


여기에서 자세한 설명은 안하였지만 wsl 내에서 docker 이미지를 이용해서도 설치해보았습니다. 여전히 인식하지 못하였습니다.

중요한 문서가 있는데... 지원되는 그래픽 카드가 정해져 있다는 것입니다.

https://rocm.docs.amd.com/projects/radeon/en/latest/docs/compatibility/wsl/wsl_compatibility.html

이쯤와서는 거의 다 포기하였습니다.

stable diffusion 은 directml(윈도우의 DirectX12 API) 이란것을 이용해서 동작시키는 방법이 있었습니다. 또 다른 방법은 ZLUDA를 이용하는 방법인데 AMD GPU를 이용해서 CUDA 흉내를 내는 방식입니다.

그래서 아래 코드를 참고해서 git 을 받고 

https://github.com/lshqqytiger/stable-diffusion-webui-amdgpu

아래와 같이 실행하였습니다. 물론 그전에 python 3.10.6 버전을 꼭 설치해야합니다.

webui-user.bat --use-zluda


Using ZLUDA

Most of AMDGPUs are compatible.

Start WebUI with --use-zluda.


정리해 보면 아래와 같습니다.

Automatic Installation on Windows

  1. Install Python 3.10.6 (Newer version of Python does not support torch), checking "Add Python to PATH".
  2. Install git.
  3. Download the stable-diffusion-webui-amdgpu repository, for example by running git clone https://github.com/lshqqytiger/stable-diffusion-webui-amdgpu.git.
  4. Run webui-user.bat from Windows Explorer as normal, non-administrator, user.

4번 실행시 webui-user.bat --use-zluda 라고 실행 시키면 됩니다.


동작하다가 numpy 관련 오류가 발생하는데 아래 가이드 보고 pip install numpy==1.23.5 로 새로 설치하였습니다.

https://myview7144.tistory.com/96


최초 동작시 NVIDIA 사용할때보다 굉장히 느립니다.

동작은 되는데 이미지 크기를 키우면 굉장히 느려집니다.

 

2025년 1월 27일 월요일

Unity New Input System pinch zoom, 핀치 줌

Unity6가 되면서 기본적으로 new input system을 기본으로 포함해서 따로 추가 설치가 필요 없게 되었습니다.

android로 개발하다 보니 pinch zoom이 필요하게 되어서 여기저기 검색도 해봤는데 멀티 터치가 생각보다 디버깅이 힘들었습니다.

제가 작업한 코드를 공개합니다. 디버깅 코드를 풀어서 디버깅 해가면서 적절하게 값을 조절 해서 사용해야 합니다.

카메라의 아래값을 변경하는 코드인데 이 환경은 프로젝트 마다 다를 수 있으므로 해당 부분을 참고하는것보다 저기에 넘기는 값을 보시기 바랍니다.

_camera.orthographicSize

아래는 전체 코드입니다. 다음 feature 부분을 참고 하세요. USE_NEW_INPUT

using UnityEngine;
#if USE_NEW_INPUT
using UnityEngine.InputSystem;
using UnityEngine.InputSystem.EnhancedTouch;
#endif

public class CameraFollow : MonoBehaviour
{
    public Transform player; // 플레이어의 Transform
    public float smoothSpeed = 0.125f; // 부드러운 이동 속도
    public Vector3 offset;         // 카메라와 플레이어 간의 거리

    public bool lockX = false;     // X축 고정 여부
    public bool lockY = false;     // Y축 고정 여부

    public bool useBounds = false; // 경계 제한 사용 여부
    public Vector2 minBounds;      // 카메라 이동 최소값 (X, Y)
    public Vector2 maxBounds;      // 카메라 이동 최대값 (X, Y)

    public Camera _camera;
    public int skipFrame = 1;
    private int curFrame;

    public bool useZoom = false;
    public float zoomSpeed = 1f;
    public float minSize = 2f;
    public float maxSize = 10f;
    void Start()
    {
        if( _camera ==null ){
            _camera = Camera.main;
        }
       
    }
    private void OnEnable() {
        #if USE_NEW_INPUT
        UnityEngine.InputSystem.EnhancedTouch.EnhancedTouchSupport.Enable();
        #endif
    }
    private void OnDisable() {
        #if USE_NEW_INPUT
        UnityEngine.InputSystem.EnhancedTouch.EnhancedTouchSupport.Disable();
        #endif
    }
    void LateUpdate()
    {
        if (player == null) return;
        //if (curFrame < skipFrame)
        //{
        //    curFrame++;
        //    return;
        //}
        //curFrame = 0;

        // 목표 위치 계산
        Vector3 targetPosition = new Vector3(
            lockX ? transform.position.x : player.position.x + offset.x, // X축 고정 여부 확인
            lockY ? transform.position.y : player.position.y + offset.y, // Y축 고정 여부 확인
            transform.position.z // Z축은 고정
        );

        // 부드럽게 이동
        Vector3 smoothedPosition = Vector3.Lerp(transform.position, targetPosition, smoothSpeed);

        // 경계 제한 적용
        if (useBounds)
        {
            smoothedPosition.x = Mathf.Clamp(smoothedPosition.x, minBounds.x, maxBounds.x);
            smoothedPosition.y = Mathf.Clamp(smoothedPosition.y, minBounds.y, maxBounds.y);
        }

        // 새로운 위치 적용
        transform.position = smoothedPosition;

        if(useZoom){
            float scrollInput = 0;
            #if USE_NEW_INPUT
                Vector2 scrollInputV2 = Mouse.current.scroll.ReadValue();
                scrollInput = scrollInputV2.y;
            #else
                scrollInput = Input.GetAxis("Mouse ScrollWheel");
            #endif


            if (scrollInput != 0)
            {
                _camera.orthographicSize -= scrollInput * zoomSpeed;
                Debug.Log("scrollInput: " + scrollInput);
                _camera.orthographicSize = Mathf.Clamp(_camera.orthographicSize, minSize, maxSize);
            }
            #if USE_NEW_INPUT
                if( UnityEngine.InputSystem.EnhancedTouch.Touch.activeTouches.Count == 2 ){
                    UnityEngine.InputSystem.EnhancedTouch.Touch touch1 = UnityEngine.InputSystem.EnhancedTouch.Touch.activeTouches[0];
                    UnityEngine.InputSystem.EnhancedTouch.Touch touch2 = UnityEngine.InputSystem.EnhancedTouch.Touch.activeTouches[1];
                    Vector2 touch1PrevPos = touch1.screenPosition - touch1.delta;
                    Vector2 touch2PrevPos = touch2.screenPosition - touch2.delta;

                    float prevTouchDelta = (touch1PrevPos - touch2PrevPos).magnitude; // 이전 프레임에서의 거리
                    float currentTouchDelta = (touch1.screenPosition - touch2.screenPosition).magnitude; // 현재 프레임에서의 거리

                    float deltaMagnitudeDiff = prevTouchDelta - currentTouchDelta;
                    //Debug.Log("scrollInput1: " + deltaMagnitudeDiff);
                    deltaMagnitudeDiff = Mathf.Clamp(deltaMagnitudeDiff, -0.5f, 0.5f);
                    //Debug.Log("scrollInput2: " + deltaMagnitudeDiff);
                    _camera.orthographicSize += deltaMagnitudeDiff * zoomSpeed;
                    _camera.orthographicSize = Mathf.Clamp(_camera.orthographicSize, minSize, maxSize);
                }
                if( UnityEngine.InputSystem.EnhancedTouch.Touch.activeTouches.Count >= 2 ){
                    GameManager.instance.isMultiTouch = true;
                }else{
                    GameManager.instance.isMultiTouch = false;
                }
            #else
                // 두 개의 터치 입력을 받았는지 확인
                if (Input.touchCount == 2)
                {
                    Touch touch1 = Input.GetTouch(0);
                    Touch touch2 = Input.GetTouch(1);

                    // 각 터치의 현재 및 이전 위치 간 거리 계산
                    Vector2 touch1PrevPos = touch1.position - touch1.deltaPosition;
                    Vector2 touch2PrevPos = touch2.position - touch2.deltaPosition;

                    float prevTouchDelta = (touch1PrevPos - touch2PrevPos).magnitude; // 이전 프레임에서의 거리
                    float currentTouchDelta = (touch1.position - touch2.position).magnitude; // 현재 프레임에서의 거리

                    float deltaMagnitudeDiff = prevTouchDelta - currentTouchDelta;
                    Debug.Log("scrollInput1: " + deltaMagnitudeDiff);
                    deltaMagnitudeDiff = Mathf.Clamp(deltaMagnitudeDiff, -0.5f, 0.5f);
                    Debug.Log("scrollInput2: " + deltaMagnitudeDiff);
                    _camera.orthographicSize += deltaMagnitudeDiff * zoomSpeed;
                    _camera.orthographicSize = Mathf.Clamp(_camera.orthographicSize, minSize, maxSize);
                }
            #endif
        }
    }
   
}

2025년 1월 6일 월요일

dialogue system for unity 사용중 android 장치에서 터치 동작이 안되는 경우

프로젝트에서 Dialogue Manager를 사용하면 Android 휴대전화에서 터치가 전혀 작동하지 않습니다. 에디터 모드에서는 정상 동작하였습니다.

Dialogue Manager 에 Input Device Manager 를 제거 해서 테스트 해보시기 바랍니다. (개발자로부터 답변 받음) 저는 이렇게 해결했습니다.


Input Device Manager - 조이스틱이나 마우스 장치 전환을 위한 것이라고 합니다. 따라서 터치를 사용하는 휴대폰의 경우 필요 없다고 합니다.

이것 때문에 하루를 소비했네요. 진작 개발자에게 문의해볼 걸 그랬습니다. 참고로 개발자 답변이 굉장히 빠릅니다....


2025년 1월 5일 일요일

unity android debbuging시 무한 경고

 

Unity 에서 안드로이드 디버깅시 이런식으로 무한 로그가 발생하는 경우 

2025-01-05 21:53:07.298 23202 23385 Warn Unity VULKAN: GENERAL WARNING: The following warning was triggered: VKDBGUTILWARN003. Please refer to the Adreno Game Developer Guide for more information: https://developer.qualcomm.com/sites/default/files/docs/adreno-gpu/snapdragon-game-toolkit/learn_guides.html


https://developer.qualcomm.com/sites/default/files/docs/adreno-gpu/snapdragon-game-toolkit/learn_guides.html 여기 홈페이지 가봐도 링크 깨져 있습니다.

로그가 무한이 나와서 다른 로그를 볼 수 없는 상태가 됩니다.

불칸을 디버깅 했을때 발생하는 현상인데 자세한 내용을 찾을 수 없어서 그래픽쪽 문제가 아니라면 불칸을 끄면 해결이 됩니다.

끄는 방법은 unity6에서 player > other settings > auto graphics API (선택해제) > OpenGLES3 를 위쪽으로 끌어 올리면 됩니다. 

디버깅 후 auto graphics API 값이 기본 enable 이므로 check 하시면 됩니다..





2024년 12월 31일 화요일

SPUM 사용법 정리


SPUM 

 SPUM 은 Unity 에서 사용하는 2D 픽셀 디자인의 캐릭터를 생성할 수 있도록 도움을 주는 캐릭터 생성기 에셋입니다.

홈페이지는 2D Pixel Unit Maker - SPUM | 2D Characters | Unity Asset Store 오랜만에 사용하려고 했더니 Documentation 페이지 링크가 깨져 있네요.

GitHub에서 사용법을 찾긴했는데 Home ko KR · soonsoon2/SPUM Wiki 문서가 구버전 문서라(오늘 날짜 기준, 개발자분이 미래에는 업데이트 했을 수도 있습니다.) 현재 버전과 내용이 맞지 않습니다. 개발자쪽에서 문서도 부지런히 버전업을 해야 할것 같은데... ㅡㅡ;;;

개인적으로 사용하면서 문서가 정리가 안되어 있는 듯 싶어서 사용에 필요한 부분만 정리해 보았습니다.

먼저 캐릭터를 만드는건 예전 문서를 보아도 충분히 사용이 가능합니다.

Assets>SPUM>Scene>SPUM_Scene 를 열어서 캐릭터를 생성하면 됩니다. 이건 누구나 쉽게 할 수 있어서 패스...


177 버전이고 Unity 6에서 사용하는 중인데

Random color check시  동작이 제대로 동작이 안되는 문제가 있습니다.





색상 버튼을 한번 눌러주면 정상 반영됩니다.

SAVE UNIT 버튼을 눌러 저장을 하면 Assets>SPUM>Resources>Units 폴더 아래에 저장이 됩니다.

사용하기

이제 불러내는 방법을 배우기 위해서는 Sample Scene를 열어봅니다.

Assets>SPUM>Sample>Scene>Sample 입니다.

지금까지 저장했던 모든 Unit들이 보여집니다. 기본 2개 포함

그런데 기본 2개는 뭔가 오류가 계속 발생합니다. ㅡㅡ. 


(기존 생성된 2개에서 오류가 발생한 것이라) 나머지 생성된것을 사용하면 되니까 오류는 무시해 줍니다. 

구조를 살펴보면 PlayObject 아래 PlayerObject가 있습니다. PlayObject는 Scale이 5임을 참고해서 실제 prefab에서 가져오면 scale을 조정하도록 해야 합니다.



그리고 PlayerManager에서 Assets>SPUM>Resources>Units 여기 폴더를 보고 해당 위치에 있는 모든 Units들을 보여주는 형태라(PlayerManager 소스 코드에서는 GetPlayerList() ) 만약 개인적인 프로젝트에서 사용하려면 Prefab을 복사해서 drag drop 형태로 사용하면 되는데 상위에 Object를 하나 만들고 그 아래에 Unit을 배치하도록 합니다.

여기 예제에서는 SamplePlayer prefab에 SPUM Unit을 부착하게 되는데,

SamplePlayer prefab에는 collider 2d와 rigidbody2d가 기본으로 있는 prefab입니다.

그리고 PlayerObj도 있는데 여기에 SPUM 기본 처리를 위한 부분들이 있어서 수동으로 Prefab을 꺼낼때 추가해주는것이 좋습니다.

그래서 개인 프로젝트에서 사용할때는 SamplePlayer 를 꺼내주고 그 아래에 SPUM 자식으로 넣어주고 Prefebs에 SPUM 연결해주면 됩니다.




넣은 SPUM object의 RectTransform은 Reset해주도록 합니다.

이러면 기본적인 동작 자체는 잘됩니다. 이동하는 것은 기존 object처럼 움직이면 됩니다.
애니메이션관련해서는 아래와 같은 코드를 이용하면 쉽게 사용이 가능합니다.

PlayerObj.cs 파일의 Update() 함수에 테스트를 위해서 일부를 추가 하였습니다. 마우스 왼쪽 버튼을 누르면 동작하는 코드입니다.
    void Update()
    {
        if(isAction) return;
        // 추가한 코드 ----
        if(Input.GetMouseButtonDown(0)){
            SetStateAnimationIndex(PlayerState.ATTACK, 5);
            PlayStateAnimation(PlayerState.ATTACK);
        }
        // 추가한 코드 ----

        transform.position = new Vector3(transform.position.x,transform.position.y,transform.localPosition.y * 0.01f);
        switch(_currentState)
        {
            case PlayerState.IDLE:
           
            break;

            case PlayerState.MOVE:
            DoMove();
            break;
        }
        PlayStateAnimation(_currentState);

    }

추가한 코드를 살펴보면 PlayStateAnimation은 공격인지 idle 동작인지를 선택하는 함수이고, SetStateAnimationIndex함수는 공격이라면 세부 항목을 선택하는 함수입니다. 공격의 경우 여러 모션이 있기 때문에 순번을 선택하는 것입니다.

SPUM 아래 ATTACK_List 살펴보면 아래와 같은 6개 리스트가 있음을 알 수 있습니다.


요약

지금까지 내용을 요약 하자면 아래와 같습니다.

1. Assets>SPUM>Scene>SPUM_Scene 를 열어서 캐릭터를 생성

2. SamplePlayer Prefab 꺼내고 아래에 SPUM Unit을 자식으로 만들고 붙여줍니다. RectTransform Reset 필요

3. Scale 맞춰 줍니다.

4. PlayerObj.cs base로 SamplePlayer Prefab 추가 수정 필요

5. 이동은 기존 Object와 동일 Animation 은 SetStateAnimationIndex, PlayStateAnimation 사용합니다.


추가 업데이트

실제 사용하다보니 Object 뒤로 가림 문제가 있네요. Sprite Renderer 의 Order in Layer 숫자를 조절을 해야하는데, Unit은 여러개의 파츠로 나뉘어 있다보니 조정하기 쉽지 않습니다.

SPUM Unit 아래에 UnitMain 자식이 있는데요.  여기 보면 Sorting Group 이라는 컴포넌트가 있습니다. 여기 있는 Order in layer를 조절하면 됩니다.

반영전 : 기본값 5


200으로 반영 후 (이건 프로젝트 마다 적절한 값을 조절 필요) 수정 후 건물 보다 앞으로 나왔습니다.







2024년 12월 28일 토요일

PixelArt Sprite 확대할때 방법 비교

Aseprite에 이미지 확대하는 방법이 3가지가 있습니다. 확인해본건 아니지만 다른툴에서도 여러가지 방법이 존재할것입니다.


그중에서 픽셀 작업한 이미지 확대할 때는 2가지 정도를 사용하는데요. 두가지를 비교해보았습니다.



16*16으로 작업한 이미지를 두배 확대한 이미지입니다.
자세히보면 Nearest-neighber에서는 부드러운 느낌이 없습니다. 픽셀만 커졌는 상태입니다.

Rotsprite 방식
보간(interpolation)을 통해 픽셀 아트를 확대하거나 회전하는 경우 기존의 픽셀 정렬과 색상을 최대한 보존합니다.

Nearest-Neighbor 방식
가장 가까운 픽셀의 색상을 복제해서 이미지를 확대하는 간단한 알고리즘입니다.

픽셀 이미지는 Rotsprite 사용하시면 좋습니다.