obsidian

Files

kaffa 06fc6040b4 osaka APISIX etcd 설정 오류 정정 및 실제 구성 반영

- osaka config.yaml의 죽은 etcd host(10.100.2.214) → mbp 정상 주소(100.115.154.78)로 수정
- osaka가 로컬 waf-etcd 대신 Patroni 공유 통합 etcd를 실사용 중임을 문서화
- mbp etcd 부트스트랩 플래그의 stale 4번째 멤버(etcd-hp2) 기록
- mbp raft 파티션 자연복구 사례 및 osaka APISIX 버전 지연(3.15.0, 최신 3.17.0) 기록

2026-07-21 15:33:12 +09:00

_index.md

history: SafeLine RWX PVC ext4 호환성 인시던트 복구 기록 (2026-05-17)

2026-05-17 16:33:53 +09:00

2026-03-15-apisix-git-push-500.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-03-24-k3s-postgresql-migration.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-03-25-apisix-to-traefik-routing.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-03-31-netbis-ddos-attack.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-03-various-gitea-changes.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-04-usb-25g-hang.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-05-supabase-to-patroni.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-06-apisix-etcd-consolidation.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-08-anomaly-detect-iterations.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-08-patroni-failover-incident.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-08-zlambda-nixos-migration.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-09-ops-agents-setup.md

obsidian: 정본 문서에서 히스토리/인시던트 분리 완료

2026-04-10 12:09:21 +09:00

2026-04-10-edge-cleanup.md

obsidian: 정본에서 변경 이력 분리, history/ 도입

2026-04-10 11:38:36 +09:00

2026-04-15-apisix-http-logger-removal.md

infra/crowdsec-safeline: remove APISIX → CrowdSec (:8085) legacy section

2026-04-15 16:31:18 +09:00

2026-04-15-longhorn-backup-label-typo.md

Longhorn recurring job 라벨 오타 수정 + history 기록

2026-04-15 10:52:06 +09:00

2026-04-15-pgcat-ha-promotion.md

pgcat HA 승격 (Step 0): replicas=2 + podAntiAffinity + PDB

2026-04-15 17:21:13 +09:00

2026-04-15-vault-mcp-duplicate-investigation.md

vault-mcp-server 실 아키텍처 정정 (중복 아님, jp1 단일 인스턴스)

2026-04-15 13:29:18 +09:00

2026-04-16-kine-multihost-migration.md

kine pgx multi-host 직결: HAProxy 의존 제거, API 다운타임 <1s

2026-04-16 12:34:53 +09:00

2026-04-16-pgcat-patroni-tcp-keepalive.md

pgcat+Patroni TCP keepalive 적용: 좀비 소켓 방지 (Step 1 옵션 B)

2026-04-16 07:26:37 +09:00

2026-04-16-pgpool-full-migration.md

pgpool 전면 전환 + pgcat 퇴역: postgresql-ha.md 전면 갱신

2026-04-16 12:24:39 +09:00

2026-04-16-pgpool-n8n-poc.md

pgpool-II PoC (n8n 전용 전환) + postgresql-ha.md 섹션 추가

2026-04-16 08:25:02 +09:00

2026-04-20-metallb-controller-oom-fix.md

metallb: raise controller mem limit 64Mi→256Mi (OOM fix)

2026-04-20 08:20:39 +09:00

2026-04-20-snapshot-controller-velero-prep.md

backup: add k8s VolumeSnapshot API (snapshot-controller v8.5.0) as Velero prereq; fix democratic-csi restart loop

2026-04-20 09:06:48 +09:00

2026-04-20-velero-install.md

backup: install Velero v1.18 (chart 12.0.0) + daily-full schedule to R2 velero-backup

2026-04-20 10:12:21 +09:00

2026-04-21-ironclad-production-cutover.md

ironclad production cutover (2026-04-21): apex → Worker 전환

2026-04-21 17:13:33 +09:00

2026-04-21-ironclad-redesign.md

products/ironclad-website: Next.js 16 + Claude Design 전환 반영

2026-04-21 15:48:53 +09:00

2026-04-21-outline-bunny-nowaf-migration.md

outline: route via APISIX (port 9443, ApisixRoute CRD), not Traefik

2026-04-21 10:08:16 +09:00

2026-04-23-netbis-bouncer-removal.md

netbis: CF 바운서 전량 제거 (netbis-cf + netbis-cf-firewall)

2026-04-23 13:52:59 +09:00

2026-04-23-netbis-firewall-bouncer-migration.md

netbis: crowdsec-cloudflare-bouncer (firewall rule) 추가 — worker bouncer와 병행

2026-04-23 13:27:23 +09:00

2026-04-23-netbis-npm-client-ip-fix.md

netbis: NPM client_ip 실 IP 추출 정비 (nginx real_ip_header + Vector VRL)

2026-04-23 16:06:37 +09:00

2026-04-23-netbis-npm-vl-collection.md

netbis: NPM 6대 Vector→zlambda→VL 로그 수집 파이프라인 구축

2026-04-23 15:23:37 +09:00

2026-04-24-cf-pseudo-ipv4-discovery.md

cloudflare: Pseudo IPv4 (Class E 240/4) 정리 — Netbis 관찰 기반

2026-04-24 08:11:44 +09:00

2026-04-25-anomaly-detect-removal.md

deprecate anomaly-detect (오탐 다수로 인스턴스까지 제거)

2026-04-25 15:00:13 +09:00

2026-04-25-netbis-cf-firewall-rebuild.md

netbis CF firewall bouncer 재구축 (origin filter) + VL acquisition 통합 + sigmatch v2.4

2026-04-25 12:43:47 +09:00

2026-04-25-netbis-npm-vector-msg-rewrite.md

netbis: NPM Vector _msg 재합성 (proxy_v2 → nginx combined) — child-nginx-logs unparsed 84% 해결

2026-04-25 15:17:01 +09:00

2026-04-26-bouncer-consolidation.md

cloudflare: Turnstile 위젯 6개 + Edge Script 64811 정리 추기

2026-04-26 10:27:02 +09:00

2026-04-29-outline-1-7-0-upgrade.md

outline: history 갱신 — pgpool DML 라우팅도 동일 버그, haproxy-pg override 영구 유지

2026-04-29 15:44:44 +09:00

2026-05-02-longhorn-snapshot-purge-cron.md

longhorn: snapshot-purge cron 워크어라운드 (v1.11.1 stuck snapshot)

2026-05-02 15:22:51 +09:00

2026-05-04-amd-iommu-freeze.md

AMD-Vi (IOMMU) Completion-Wait timeout 메커니즘 정본 신설

2026-05-05 11:47:31 +09:00

2026-05-07-longhorn-1-11-2-upgrade.md

longhorn: 1.11.1 → 1.11.2 (snapshot warning #12856 fix)

2026-05-07 08:10:59 +09:00

2026-05-09-longhorn-snapshot-purge-cron-removal.md

longhorn: snapshot-purge 임시 cron 회수 (1.11.2 fix 적용 후 의미 소멸)

2026-05-09 20:37:13 +09:00

2026-05-17-safeline-pvc-fsck-incompat.md

history: complete safeline chaos/detector-logs preemptive PVC replacement (2026-05-18)

2026-05-18 19:35:38 +09:00

2026-05-20-kr2-multus-shim-etxtbsy.md

incus-hp1 storage-net 참여 사실 반영 + kr2 multus-shim ETXTBSY 인시던트 기록

2026-05-20 17:10:07 +09:00

2026-05-20-nas-eth2-replacement.md

NAS eth2 USB 2.5GbE 카드 교체 (rev 17 → rev 14, USB 4-1 → 2-2)

2026-05-20 15:41:31 +09:00

2026-05-23-cf-bouncer-fall-mvp-removal.md

cf-bouncer: fall-mvp.com zone 제거 — netbis CF bouncer 21일 만에 동기화 재개

2026-05-23 14:00:25 +09:00

2026-05-23-kr1-k3s-stuck-cascade.md

history: kr1 k3s 12시간 stuck — etcd/cf-bouncer/longhorn 연쇄 인시던트 기록

2026-05-23 10:41:58 +09:00

2026-05-26-nas-r8152-upgrade-2.21.4.md

nas: r8152 v2.20.1-1 → v2.21.4-1 (LPM 재발 대응) + spk_su 설치 절차 기록

2026-05-26 17:12:02 +09:00

2026-05-29-termix-upgrade-release-2.3.1.md

history: termix image.tag 명시 고정은 정책 위배 — :latest 복귀 위임 기록

2026-05-29 19:56:38 +09:00

2026-06-01-longhorn-snapshot-retention-fix.md

outline-data 스냅샷 사건: 2026-06-01 retention 수정이 미검증 상태로 방치돼 재발했음을 확인

2026-07-11 12:28:45 +09:00

2026-06-11-kr2-k3s-readonly-hang.md

history: kr2 k3s hang 근본원인 확정(Type=notify+TimeoutStartSec=0)+조치(TimeoutStartSec=300 drop-in, apisix-etcd reinit). HAProxy 변경 금지 명시

2026-06-11 11:06:34 +09:00

2026-07-11-n8n-oidc-secret-not-wired.md

n8n: OIDC SSO 버튼 미노출 버그 기록, envFrom 누락 수정 및 Helm 드리프트 위험 문서화

2026-07-11 13:04:58 +09:00

2026-07-11-n8n-upgrade-2.29.10-helm-native.md

n8n: 2.29.10 업그레이드 이력 기록, Helm 드리프트 해소 반영

2026-07-11 13:39:35 +09:00

2026-07-11-outline-data-snapshot-cap-exceeded.md

outline-data 사건 후속: 타 볼륨 점검 결과 추가 — 버스트성 증가 패턴 확인

2026-07-11 12:41:31 +09:00

2026-07-11-pgpool-stale-primary-n8n-outage.md

n8n 장애: pcp.conf 근본 원인(entrypoint 미생성) 및 helm-charts 수정 내역 반영

2026-07-11 12:59:03 +09:00

2026-07-21-cf-zone-cleanup.md

CF zone 정리: actions.it.com, servidor.it.com 삭제 (2026-07-18 NS 이탈 확인 후)

2026-07-21 13:48:25 +09:00

2026-07-21-ops-agents-decommission.md

ops agents 전체 삭제: heimdall은 이미 부재 확인, syn/skuld incus delete로 정리

2026-07-21 13:27:32 +09:00

2026-07-21-osaka-apisix-etcd-fix.md

osaka APISIX etcd 설정 오류 정정 및 실제 구성 반영

2026-07-21 15:33:12 +09:00

README.md

obsidian: 정본에서 변경 이력 분리, history/ 도입

2026-04-10 11:38:36 +09:00

README.md

title, tags

title

파일 규칙

파일명: YYYY-MM-DD-<주제>.md (예: 2026-04-10-edge-cleanup.md)
하나의 이벤트 = 하나의 파일. 관련된 조치들이 하루에 연쇄로 일어난 경우 한 파일로 묶어도 됨.
Frontmatter: date, topic, areas (관련 Obsidian 정본 파일 경로), tags
본문:
- ## 배경 — 왜 이 변경이 필요했는가
- ## 변경 사항 — 무엇을 어떻게 바꿨는가 (before → after)
- ## 영향 / 검증 — 사용자 영향, 실측 검증 결과
- ## 교훈 (있으면) — 인시던트였다면 원인 + 재발 방지
- ## 참조 — Outline doc, OpenMemory id, 관련 정본 파일 링크

정본과의 관계

정본 (infra/, services/, products/, ...) 에는 현재 사실만. "2026-04-DD X→Y 변경" 같은 연대기 주석, ~~strikethrough~~ 로 남긴 제거 항목, 인시던트 서사 금지.
어떤 변경이든:
1. 정본 파일에서 "현재 사실" 을 새 값으로 덮어쓴다
2. history/YYYY-MM-DD-<주제>.md 에 상세 이력을 남긴다
3. 정본에서 history 파일을 참조 링크로 연결할 수는 있으나, 이력 본문을 정본에 복제하지 않는다
git commit 히스토리는 정본 파일 변경을 자동으로 기록하므로 "이 줄이 왜 바뀌었는가" 는 git blame + 해당 commit 의 history 링크로 추적 가능하다.

왜 이렇게 분리하나

정본이 log 가 되면 "지금 상태" 파악이 어려워진다
변경 이력은 시간순이라 쌓이고, 정본은 시점 독립이라 덮어써진다 — 두 구조가 섞이면 안 됨
OpenMemory 와 Outline 도 유사한 시간축 기록 공간이지만, OpenMemory 는 시멘틱 검색용 요약, Outline 은 에이전트 간 대화 로그. history/ 는 인프라 변경의 정본 사본 (git 보관)