본문 바로가기

클라우드 및 인프라/Linux61

polkitd cpu많이 사용됨 - polkitd high cpu usage for at least hours user 계정에 polkitd 가 cpu를 20%정도 사용되고 있는것을 볼 수 있다. # yum update 업데이트 후 재부팅 하면된다 나는 재부팅할 수 없는 상황이라서 업데이트만 해두었다. https://forums.centos.org/viewtopic.php?t=67547 polkitd high cpu usage for at least hours - CentOS Issues related to applications and software problems paulrichards321 Posts: 3 Joined: 2018/06/28 19:41:49 Post by paulrichards321 » 2018/06/28 20:03:51 For some reason once polkitd starts it .. 2021. 6. 23.
[linux] nohup 터미널 세션 끊겨도 프로세스 실행 되게 하기(백그라운드에서 실행) nohup로 실행하면 hang-up signal이 와도 동작하기 때문에 터미널 연결이 끊어져도 실행을 멈추지 않는다 &는 백그라운드로 실행한다는 의미로 기본적으로 nohup가 아닐 경우 터미널이 끊어지면 실행도 끊어진다. nohup [프로세스] & nohup 를 통해 작업이 실행되는 동안 나타나는 메시지는 nohup.out 파일에 저장된다. rail 명령어로 nohup.out 파일에 저장되고 있는 메시지들을 확인할 수 있다. 종료는 ctrl+c로 할 수 있다. tail -f nohup.out cat nohup.out 프로세스가 잘 실행되고 있는지 jobs 명령어로 확인한다. 프로세스 종료는 kill 명령어를 사용한다 작업번호 앞에 %를 꼭 붙여 사용해야한다 netstat -tnlp #kill -9 %작업.. 2021. 6. 18.
linux 파일 버전 확인(spark, hadoop, java,pip) spark 버전 spark-submit --version 하둡버전 hadoop version 자바 버전 java -verion pip 버전 pip --version pip -V 2021. 6. 17.
[airflow] WARNING: No user yet created, use flask fab command to do it airflow 설치 후 webserver 를 실행하면 다음과 같은 경고를 만나게 되었다. WARNING: No user yet created, use flask fab command to do it. command창에 다음과 같은 명령어를 입력해주고 username, email, password 를 적어주면 된다. FLASK_APP=airflow.www.app flask fab create-admin user 추가 후 웹서버를 다시 실행하면 접속이 잘되는 것을 확인할 수 있다. airflow webserver -p 8080 2021. 6. 17.
docker 기반 airflow 설치하기 도커 컨테이너 생성 docker run -it -d --restart always -p 11080:8080 -e LC_ALL=C.UTF-8 -v /home/bsh/docker-temp/airflow:/home/share --name airflow ubuntu:18.04 컨테이너 접속 docker exec -it airflow bash 설치 후 실행 Miniconda3-latest-Linux-x86_64.sh sh Miniconda3-latest-Linux-x86_64.sh docker restart 후 다시 접속한다 gcc를 설치해야한다. apt-get update apt-get install gcc apt-get install nano 그 후 conda를 업데이트하고 airflow를 설치해준다. con.. 2021. 6. 16.
centos 7 에 htop 설치하기 htop 을 설치하기전에 epel-release를 먼저 설치 후 htop을 설치한다 sudo yum -y update sudo yum -y install epel-release sudo yum -y install htop 2021. 6. 14.