[unix] Linux에서 버퍼 캐시 크기 제한

나는 당신의 질문 끝에 당신의 직감이 올바른 길에 있다고 생각합니다. CPU 사이에서 A, NUMA 인식 메모리 할당 마이그레이션 페이지 또는 B, 연속 정렬 된 영역을 찾으려고하는 투명 거대한 페이지의 조각 모음 코드 일 가능성이 큽니다.

Hugepages와 투명한 hugepages는 특정 워크로드에서 현저한 성능 향상과 많은 이점을 제공하지 않고 엄청난 양의 CPU 시간을 소비하는 것으로 식별되었습니다.

실행중인 커널, / proc / meminfo의 내용 (또는 적어도 HugePages_ * 값) 및 가능하면 pageblock_pfn_to_page ()를 참조하는 더 많은 vtune 프로파일 러 호출 그래프를 아는 것이 도움이됩니다.

또한 내 추측에 빠지면 다음과 같이 hugepage 조각 모음을 비활성화하십시오.

echo ‘never’> / sys / kernel / mm / transparent_hugepage / defrag

(커널에 따라 대신이 될 수 있습니다.)

echo ‘never’> / sys / kernel / mm / redhat_transparent_hugepage / defrag

마지막으로,이 응용 프로그램은 당신이 쓴 무언가의 수십 기가를 사용합니까? 어떤 언어?

“메모리 페이지에서 오류 발생”이라는 용어를 사용 했으므로 운영 설계 및 가상 메모리에 익숙하다고 생각합니다. 나는 거의 I / O에서 읽지 않는 공격적으로 오류가 발생하는 상황 / 응용 프로그램을 구상하려고 노력합니다. 거의 항상 버퍼 캐시에서 제한하려고합니다.

(호기심이 있다면 MAP_ANONYMOUS 및 MAP_POPULATE 및 mincore (2)와 같은 mmap (2) 플래그를 확인하여 실제로 어떤 물리적 페이지에 실제 페이지가 매핑되어 있는지 확인할 수 있습니다.)

행운을 빕니다!

답변

cgcreate -g memory,cpu:group1

cgset -r memory.limit_in_bytes=$((50*1024*1024*1024)) group1

cgclassify -g memory,cpu:group1 $(pidof your_app_name)

cgexec -g memory,cpu:group1 your_app_name

 $ man tuned

 /etc/tuned
 /etc/tuned/*.conf
 /usr/share/doc/tuned-2.4.1
 /usr/share/doc/tuned-2.4.1/TIPS.txt

This parameter may be useful for you.

** Set flushing to once per 5 minutes
** echo "3000" > /proc/sys/vm/dirty_writeback_centisecs