browser-pdf-capture 코드 참조

/browser-pdf-capture 10.1016/j.phymed.2025.156973
/browser-pdf-capture https://www.sciencedirect.com/science/article/pii/S0944711325006117

python ~/projects/skills/scripts/browser-capture-pdf.py \
  --doi "10.1016/j.xxx" \
  --output "/path/to/output.pdf" \
  --job-id "abc123" \
  --content-id "content-id" \
  --db-path "/path/to/dev.db"

python ~/projects/skills/scripts/browser-capture-pdf.py \
  --doi "10.1016/j.xxx" \
  --output "/path/to/output.pdf" \
  --job-id "meta-paperId" \
  --content-id "paperId" \
  --db-path "/path/to/dev.db" \
  --table "MetaPaper" \
  --pdf-url-prefix "/uploads/meta-papers"

# 매 실행마다 고유한 임시 프로필 디렉토리 생성
user_data_dir = tempfile.mkdtemp(prefix='uc-browser-capture-')
driver = uc.Chrome(
    options=options,
    use_subprocess=True,
    version_main=chrome_version,
    user_data_dir=user_data_dir  # 기존 Chrome과 완전 격리
)
# 완료 후 임시 디렉토리 자동 삭제

# undetected-chromedriver가 Chrome 릴리즈 번호 fetch 시 urllib.urlopen 사용
# → SSL: CERTIFICATE_VERIFY_FAILED 발생
import ssl
ssl._create_default_https_context = ssl._create_unverified_context

consecutive_window_errors = 0
MAX_WINDOW_ERRORS = 10  # 10초 연속 창 접근 실패 시 조기 종료
# 90초 대기 대신 10초 만에 포기 → 리소스 절약

def kill_stale_chromedriver():
    """이전 실행에서 남은 chromedriver 프로세스 종료"""
    # pgrep -f 'chromedriver.*--enable-chrome-logs'

def cleanup_old_temp_dirs():
    """1시간 이상 된 uc-browser-capture-* 임시 디렉토리 삭제"""

락 파일: /tmp/browser-capture-pdf.lock
정보 파일: /tmp/browser-capture-pdf.lock.info

최대 대기 시간: 5분 (300초)
락 유효 시간: 10분 (600초) - 초과 시 강제 해제
데드락 방지: 프로세스 생존 여부(PID) + 타임스탬프 확인

#abstracts, .abstract, [id*="abstract"], [class*="abstract"]
.article-content, .article-body, .article__body
article, .JournalAbstract, .ArticleAbstract
.content-box, .paper-content, .fulltext
main article, main .content, [role="main"]
.doi-link, .citation-info, .article-header
h1.article-title, .author-info, .authors-list

pdf_params = {
    'landscape': False,
    'displayHeaderFooter': False,
    'printBackground': True,
    'preferCSSPageSize': False,
    'paperWidth': 8.27,   # A4
    'paperHeight': 11.69, # A4
    'marginTop': 0.4,
    'marginBottom': 0.4,
    'marginLeft': 0.4,
    'marginRight': 0.4,
}
result = driver.execute_cdp_cmd('Page.printToPDF', pdf_params)

mcp__plugin_playwright_playwright__browser_navigate로 URL 접속

mcp__plugin_playwright_playwright__browser_wait_for로 2-3초 대기

mcp__plugin_playwright_playwright__browser_run_code 사용:

async (page) => {
  const pdfPath = './cell/{DOI_파일명}.pdf';  // 프로젝트 루트 기준

  await page.pdf({
    path: pdfPath,
    format: 'A4',
    printBackground: true,
    margin: {
      top: '15mm',
      bottom: '15mm',
      left: '10mm',
      right: '10mm'
    }
  });

  return `PDF saved to: ${pdfPath}`;
}

mcp__plugin_playwright_playwright__browser_close로 브라우저 닫기

[UC Chrome] 락 획득 시도...
[Lock] 락 획득 성공 (PID: 25605)
[UC Chrome] DOI URL: https://doi.org/10.2214/AJR.14.13810
[UC Chrome] 격리된 프로필 디렉토리: /var/folders/.../uc-browser-capture-seya3ozg
[UC Chrome] 감지된 Chrome 버전: 145
[UC Chrome] 브라우저 시작 중...
[UC Chrome] 브라우저 안정화 대기 (2초)...
[UC Chrome] 페이지 이동 중...
[UC Chrome] 리다이렉트 대기 (3초)...
[UC Chrome] 콘텐츠 로딩 대기 중...
[UC Chrome] 대기 중... (1/90초) - 제목: Article Title...
[UC Chrome] ✅ 콘텐츠 로딩 완료 (1초) - 셀렉터: #abstracts
[UC Chrome] 추가 안정화 대기 (5초)...
[UC Chrome] 현재 URL: https://www.ajronline.org/doi/10.2214/AJR.14.13810
[UC Chrome] 쿠키 배너 없음 또는 이미 처리됨
[UC Chrome] 'Show more' 버튼 1개 클릭 (JS)
[UC Chrome] 팝업/툴팁 5개 숨김
[UC Chrome] PDF 생성 중: /path/to/output.pdf
[UC Chrome] ✅ PDF 생성 완료 (355474 bytes)
[UC Chrome] 임시 프로필 디렉토리 정리 완료
[UC Chrome] MetaPaper 업데이트 완료: pdfFile=/uploads/meta-papers/filename.pdf
{"success": true, "source": "browser-capture", "fileSize": 355474, ...}
[Lock] 락 해제 완료

# 창 닫힘 (봇 감지/페이월)
[UC Chrome] 창 접근 오류 (1/90초, 연속 1회): no such window: target window already closed
[UC Chrome] ❌ 브라우저 창이 10초 이상 닫힌 상태 - 캡처 불가

# SSL 오류 (ssl 우회 미적용 시)
ssl.SSLCertVerificationError: [SSL: CERTIFICATE_VERIFY_FAILED]

# 모듈 미설치
ModuleNotFoundError: No module named 'undetected_chromedriver'

# 좀비 chromedriver 프로세스 정리
pkill -f 'chromedriver.*--enable-chrome-logs'

# 오래된 임시 프로필 정리
rm -rf /tmp/uc-browser-capture-*

# Python 버전 확인
python3 --version
python3 -c "import ssl; print(ssl.OPENSSL_VERSION)"

rm -rf ~/Library/Caches/ms-playwright/mcp-chrome-*

pip install --break-system-packages undetected-chromedriver selenium

rm -f /tmp/browser-capture-pdf.lock /tmp/browser-capture-pdf.lock.info

pip install --break-system-packages undetected-chromedriver selenium

1. browser_navigate → https://doi.org/10.1016/j.phymed.2025.156973
2. browser_wait_for → 3초 대기
3. browser_snapshot → 페이지 구조 확인
4. browser_click → "Show more" 버튼 (ref=e155)
5. browser_wait_for → 1초 대기
6. browser_run_code → PDF 생성
7. browser_close → 브라우저 종료
8. ls -la → 파일 확인 (2.4MB)