전체 글(428)
-
[admob] 귀하의 앱에서 광고 게재가 중지되었습니다.
10년?? 간 잘 동작하고 있던 앱에서 갑자기 아래와 같은 무시무시한 메일을 받게 되었다.. 해당 메일로는 어떤 문제가 있는지 확인 할 수가 없어서 애드몹에 들어가서 상세한 내용을 확인해 보기로 했다. 상세 내용은 정책 센터의 메뉴를 클릭하면 확인을 할 수가 있었다.하지만 상세 내용은 아래와 같이 고작 7글자 뿐... 사이트 행동: 탐색 과연 이게 무슨 뜻일까... 일단은 해당 화면이 콘텐츠 영역과 광고 영역이 따로 구분이 없어서 생기는 문제 같아서 콘텐츠 영역에 아래와 같이 boundary 경계선을 추가한 후 다시 승인 요청을 했다. 하지만 승인 실패...도저히 이유를 모르겠어서 애드몹 고객센터를 통해 원인을 문의했다. (지금 생각한 거지만.. 모를 땐 물어보는게 가장 빠른 방법이었던 것 같다.) ..
2025.06.09 -
[KAFKA] topic reassign 하기
2025.05.23 - [Big Data] - [KAFKA] kafka broker scale out 하기 topic 이전 -> 기존 broker server remove 위의 순서대로 진행할 예정이다. 일단 broker scale out을" data-og-host="yujuwon.tistory.com" data-og-source-url="https://yujuwon.tistory.com/entry/KAFKA-kafka-broker-server-%EA%B5%90%EC%B2%B4-%ED%95%98%EA%B8%B0" data-og-url="https://yujuwon.tistory.com/entry/KAFKA-kafka-broker-server-%EA%B5%90%EC%B2%B4-%ED%95%98%EA%B8%..
2025.05.24 -
[KAFKA] kafka broker scale out 하기
kafka를 서비스 중인 broker server의 연식이 다 되어서 교체할 필요가 생겼다. 교체 순서는 우선 broker scale out -> topic 이전 -> 기존 broker server remove 위의 순서대로 진행할 예정이다. 일단 broker scale out을 위해 신규 서버에 kafka를 설치한다.kafka 설치는 https://kafka.apache.org/downloads 해당 사이트에 들어 간 후 자신이 원하는 버전의 kafka를 다운 받으면 된다. 다운을 다 받았다면 압축을 푼 후, kafka/config 폴더 내의 server.properties 파일을 수정해 주자. 우선 수정해야 할 것은 broker.id를 수정해 준다.기존 kafka broker에 scale out을 하..
2025.05.23 -
[KAFKA] kafka-ui helm chart로 설치 하기
kafka의 효율적인 관리를 위해 kafka-ui를 설치해 보자.kafka-ui는 k8s 상에서 설치하는 것을 전제로 했기 때문에 helm chart를 이용해서 설치하도록 한다. 우선 helm에 kafka-ui를 설치하기 위해 helm repo를 추가해 준다. $> helm repo add kafka-ui https://provectus.github.io/kafka-ui-charts 차트에 value 값을 수정하기 위해 value 데이터를 저장한다. $> helm show values kafka-ui/kafka-ui > override-values.yaml override-values.yaml을 열어서 아래와 같이 내용을 수정해 준다. .....yamlApplicationConfig: kafka: ..
2025.05.22 -
[Spark] history server 장애
새벽에 갑자기 namenode가 내려갔다는 장애 알림 메시지를 받게 됨!!! 일단 일어나서 부랴부랴 네임노드를 다시 재 시작해주고.. (다행히 ha 설정이 되어 있어서 서비스 상에서는 문제가 없었음) 자세히 왜 내려 갔는지 문제점을 파악하기 시작!! 일단 문제가 발생한 원인은 아래의 그래프에서 찾을 수 있었다. 바로바로 과도한 cpu 사용으로 인한 namenode shutdown 저렇게 과도하게 cpu를 먹고 있는게 과연 무엇을까 서버 접속해서 top를 쳐본 결과 spark history server에서 2000% 넘게 cpu를 사용하고 있는 걸 확인했다. 왜 history server가 2000%를 먹고 있는지 확인해 보기 위해 hdfs에 있는 history log list를 확인하려고 접근하려는 순..
2025.04.14 -
rocky8 서버에 nfs 공유 볼륨 구성하기
$ sudo rpcbind start대상 os : rocky8서버 host : test-server1, test-server2, test-server3 test-server1을 nfs-server로 설정하고, test-server2, test-server3을 nfs-client로 구성하고자 한다. nfs-server 구성하기test-server1에 대해 nfs-server를 구성한다.아래와 같이 yum update를 진행한 후 rpcbind와 nfs library를 설치 하자.$ sudo yum update$ sudo yum install rpcbind nfs* /etc/exports에 아래의 형태로 공유하고자 하는 볼륨 정보를 기입해 준다. 공유 볼륨 기입 전에 공유하고자 하는 폴더는 미리 생성해 주도..
2025.03.06