Author SHA1 Message Date
admin e2f495dbb9 Merge pull request 'chore(security): fail-closed scannerfel + resurstak for scannrarna' (#6) from chore/security-fail-closed-20261113 into main
coolify-deploy / deploy (push) Failing after 4s
security / scan (push) Successful in 1m4s
2026-11-14 16:37:13 +00:00
admin bb291a9451 chore(security): fail-closed scannerfel + resurstak for scannrarna
security / scan (pull_request) Successful in 50s
2026-11-14 16:27:28 +00:00
admin d876007353 Merge pull request 'docs(repo): siax.repo.v3.json - repo-manifest (SRC-02)' (#5) from fix/repo-manifest-20261112 into main
coolify-deploy / deploy (push) Failing after 12s
security / scan (push) Failing after 1m5s
2026-11-12 23:26:39 +00:00
admin ce9fb06226 docs(repo): siax.repo.v3.json - repo-manifest (SRC-02)
security / scan (pull_request) Waiting to run
SIAX repo-standard 3.0. Fakta ur den levande matningen (application-config
inventory 2026-11-12) och repos egna filer; inget gissat. appId ar null med
motivering (inget appId i CL0UD APP_REGISTRY).
2026-11-12 21:03:23 +01:00
admin 482066f4a7 Merge pull request 'chore(standard): standardartefakter enligt SIAX repo-standard' (#3) from oc/standard-artifacts-20261112 into main
coolify-deploy / deploy (push) Failing after 4s
security / scan (push) Failing after 1m14s
2026-11-12 17:50:09 +00:00
admin 326e21fc71 Merge pull request 'ci(concurrency): volymreducering i 1 workflow' (#4) from ci/concurrency-2026-11-11 into main
coolify-deploy / deploy (push) Canceled after 0s
ci(concurrency): volymreducering enligt §12
2026-11-12 17:34:46 +00:00
admin 133212278d chore(standard): lägg till AGENTS.md
security / scan (pull_request) Failing after 2m6s
2026-11-12 17:27:26 +00:00
admin f5a19477ea chore(standard): lägg till LICENSE 2026-11-12 17:27:26 +00:00
admin 9447f97c79 chore(standard): lägg till .siax-doctor.json 2026-11-12 17:27:25 +00:00
admin 28a93066cc chore(standard): lägg till .gitea/workflows/security.yml 2026-11-12 17:27:24 +00:00
5 changed files with 349 additions and 0 deletions
+213
View File
@@ -0,0 +1,213 @@
name: security
# CI-10 — gitleaks, Semgrep, OSV-Scanner, Trivy. Körs på PR, på push mot main
# och nattligt. Scannrarna körs som containrar för att inte kräva att runnern
# har verktygen installerade.
#
# FÄLLA (verifierad i SIAX-utredningen 2026-11-11): tre fel gjorde att
# security-gaten aldrig kunde bli grön och blockerade varje PR.
# 1. `-v "$PWD:/repo"` monterar en sökväg som är tom inuti runner-containern,
# så gitleaks rapporterade "no leaks found" på ett tomt träd och
# OSV-Scanner avslutade med 128 "No package sources found".
# 2. `--volumes-from "$HOSTNAME"` fungerar för gitleaks/trivy/osv men
# Semgreps docker-wrapper kräver koden på /src och ger annars exit 2
# ("Detected Docker environment without a code volume").
# 3. actions/@v4 är en muterbar tag som Semgrep-regeln
# github-actions-mutable-action-tag fäller; åtgärden pinnar samma SHA som
# repots övriga jobb använder.
# Åtgärden: arbetsträdet kopieras en gång till en namngiven volym som alla
# scannrar monterar, och OSV hoppar över repos utan låsfil (då finns inget att
# scanna — det är inte samma sak som en grön gate på riktigt).
#
# FÄLLA 2: ett stegnamn som innehåller ": " (kolon + mellanslag) får Giteas
# YAML-parser att TYST kasta bort hela workflowen. Håll stegnamn i ren ASCII
# utan kolon-mellanslag.
on:
push: { branches: [main] }
pull_request: {}
schedule:
- cron: "17 2 * * *"
workflow_dispatch: {}
permissions: { contents: read }
concurrency:
group: security-${{ github.ref }}
cancel-in-progress: true
jobs:
scan:
runs-on: ubuntu-latest
# Övre gräns: ett scannerjobb får aldrig äta en delad runner-värd.
timeout-minutes: 60
steps:
- uses: actions/checkout@11d5960a326750d5838078e36cf38b85af677262 # v4
with: { fetch-depth: 0 }
- name: Prepare scan volume
run: |
vol="siax-scan-${GITHUB_RUN_ID}-${GITHUB_RUN_ATTEMPT}"
docker volume create "$vol" >/dev/null
for i in 1 2 3; do docker pull alpine:3.20 && break || sleep $((i*15)); done
tar -cf - . | docker run --rm -i -v "$vol:/repo" -w /repo alpine:3.20 sh -c 'tar -xf -'
docker run --rm -v "$vol:/repo" alpine:3.20 test -d /repo/.git \
|| { echo "::error::scan volume saknar .git"; exit 1; }
echo "SCAN_VOLUME=$vol" >> "$GITHUB_ENV"
- name: Pull scanner images
run: |
set -e
for i in 1 2 3; do docker pull alpine:3.20 && break || sleep $((i*15)); done
for i in 1 2 3; do docker pull aquasec/trivy:0.76.2 && break || sleep $((i*15)); done
for i in 1 2 3; do docker pull ghcr.io/google/osv-scanner:v2.7.1 && break || sleep $((i*15)); done
for i in 1 2 3; do docker pull semgrep/semgrep:1.183.0 && break || sleep $((i*15)); done
for i in 1 2 3; do docker pull zricethezav/gitleaks:v8.30.1 && break || sleep $((i*15)); done
# gitleaks i arbetstradet. Blockerar pa hemligheter som finns i koden nu (SEC-01).
- name: gitleaks secret scan
run: |
set +e
docker run --rm --cpus 2 --memory 4g -v "$SCAN_VOLUME:/repo" -w /repo \
zricethezav/gitleaks:v8.30.1 detect --no-git --source /repo --no-banner --redact --exit-code 1 > /tmp/scan.log 2>&1
rc=$?
set -e
tail -n 120 /tmp/scan.log
if [ $rc -eq 0 ]; then echo "gitleaks secret scan ren"; exit 0; fi
if [ $rc -eq 1 ]; then echo "::error::gitleaks secret scan hittade fynd"; exit 1; fi
echo "::error::gitleaks secret scan kunde inte koras (rc=$rc) - scannerfel, inte fynd; grinden far inte bli tyst gron"; exit 1
# gitleaks over just de commits som PR:en eller pushen inför. Blockerar på
# hemligheter som introduceras i intervallet, även om de raderas senare i
# samma PR (de finns kvar i historiken efter merge). Git-läget med
# --log-opts skannar bara tillagda rader, så en PR som RADERAR en gammal
# hemlighet fälls inte, och .gitleaks.toml/.gitleaksignore i repot gäller.
# Fullhistoriken körs bara nattligt/manuellt (nästa steg): en full
# `git log -p --all` per PR tog timmar och sänkte runner-värden
# (server10, 2026-11-11).
- name: gitleaks commit range
if: github.event_name == 'pull_request' || github.event_name == 'push'
timeout-minutes: 15
env:
EVENT_NAME: ${{ github.event_name }}
BASE_SHA: ${{ github.event.pull_request.base.sha }}
PR_HEAD_SHA: ${{ github.event.pull_request.head.sha }}
BEFORE_SHA: ${{ github.event.before }}
run: |
set -eu
test -d .git || { echo "::error::ingen .git i $PWD"; exit 1; }
head="${PR_HEAD_SHA:-$GITHUB_SHA}"
base=""
if [ "$EVENT_NAME" = "pull_request" ] && [ -n "${BASE_SHA:-}" ]; then
base=$(git merge-base "$BASE_SHA" "$head" 2>/dev/null || echo "$BASE_SHA")
elif [ -n "${BEFORE_SHA:-}" ] && [ "$BEFORE_SHA" != "0000000000000000000000000000000000000000" ] \
&& git cat-file -e "${BEFORE_SHA}^{commit}" 2>/dev/null; then
base="$BEFORE_SHA"
fi
MAX=500
if [ -n "$base" ]; then
count=$(git rev-list --count "$base..$head")
echo "intervall $base..$head: $count commits"
if [ "$count" -eq 0 ]; then echo "inga nya commits i intervallet"; exit 0; fi
if [ "$count" -gt "$MAX" ]; then
echo "::warning::intervallet har $count commits; skannar de $MAX senaste. Resten täcks av den nattliga fullhistorikskanningen."
fi
logopts="-n $MAX $base..$head"
else
echo "::notice::inget jämförbart föregående läge (ny gren eller omskriven historik); skannar head-commiten. Fullhistoriken täcks nattligt."
logopts="-n 1 $head"
fi
name="siax-gitleaks-range-${GITHUB_RUN_ID}-${GITHUB_RUN_ATTEMPT}"
set +e
timeout --signal=TERM 12m docker run --rm --name "$name" --cpus 2 --memory 4g \
-v "$SCAN_VOLUME:/repo" -w /repo \
-e GIT_CONFIG_COUNT=1 -e GIT_CONFIG_KEY_0=safe.directory -e GIT_CONFIG_VALUE_0='*' \
zricethezav/gitleaks:v8.30.1 detect --source /repo --log-opts="$logopts" \
--no-banner --redact --exit-code 1 > /tmp/scan.log 2>&1
rc=$?
set -e
docker kill "$name" >/dev/null 2>&1 || true
tail -n 120 /tmp/scan.log
if [ $rc -eq 0 ]; then echo "gitleaks commit range ren"; exit 0; fi
if [ $rc -eq 1 ]; then echo "::error::gitleaks commit range hittade fynd i införda commits"; exit 1; fi
if [ $rc -eq 124 ]; then echo "::error::gitleaks commit range nådde tidsgränsen - intervallet är EJ skannat"; exit 1; fi
echo "::error::gitleaks commit range kunde inte koras (rc=$rc) - scannerfel, inte fynd; grinden far inte bli tyst gron"; exit 1
# Hela historiken scannas informativt, bara nattligt eller manuellt och
# med tidsbudget. Gamla hemligheter i tidigare commits kräver
# historikomskrivning och blockerar därför inte bygget.
- name: gitleaks history informational
if: github.event_name == 'schedule' || github.event_name == 'workflow_dispatch'
timeout-minutes: 45
continue-on-error: true # ci2-allow-swallowed-failure: historik-gitleaks informativt per kanonisk security.yml
run: |
name="siax-gitleaks-history-${GITHUB_RUN_ID}-${GITHUB_RUN_ATTEMPT}"
rc=0
timeout --signal=TERM 40m docker run --rm --name "$name" --cpus 2 --memory 6g \
-v "$SCAN_VOLUME:/repo" -w /repo \
-e GIT_CONFIG_COUNT=1 -e GIT_CONFIG_KEY_0=safe.directory \
-e GIT_CONFIG_VALUE_0='*' \
zricethezav/gitleaks:v8.30.1 detect --source /repo --no-banner --redact --exit-code 1 || rc=$?
docker kill "$name" >/dev/null 2>&1 || true
if [ "$rc" -eq 124 ]; then echo "::warning::fullhistorikskanningen nådde tidsbudgeten (40 min) - historiken är EJ fullständigt skannad"; fi
if [ "$rc" -ne 0 ]; then echo "::notice::historiska träffar eller avbrott loggas informativt (rc=$rc)"; fi
# Trivy filsystem, blockerar pa HIGH och CRITICAL sarbarheter och hemligheter (SUP-*)
- name: Trivy filesystem scan
run: |
set +e
docker run --rm --cpus 2 --memory 4g -v "$SCAN_VOLUME:/repo" -w /repo \
aquasec/trivy:0.76.2 fs --scanners vuln,secret --severity HIGH,CRITICAL --exit-code 1 --no-progress /repo > /tmp/scan.log 2>&1
rc=$?
set -e
tail -n 120 /tmp/scan.log
if [ $rc -eq 0 ]; then echo "Trivy filesystem scan ren"; exit 0; fi
if [ $rc -eq 1 ]; then echo "::error::Trivy filesystem scan hittade fynd"; exit 1; fi
echo "::error::Trivy filesystem scan kunde inte koras (rc=$rc) - scannerfel, inte fynd; grinden far inte bli tyst gron"; exit 1
# Dockerfile- och IaC-misconfig är informativt: DS-0002 (root-USER)
# kräver ändrade runtime-användare och hanteras per repo, inte i grinden.
- name: Trivy config informational
continue-on-error: true
run: |
docker run --rm -v "$SCAN_VOLUME:/repo" -w /repo \
aquasec/trivy:0.76.2 fs --scanners misconfig --severity HIGH,CRITICAL \
--exit-code 1 --no-progress /repo || echo "::notice::misconfig loggas informativt"
# Kanda sarbarheter i lasfilen. osv-scanner 2.x hittar inte alltid
# osv-scanner.toml sjalv, sa den skickas explicit nar den finns.
- name: OSV Scanner
run: |
if ! find /repo -maxdepth 3 \( -name 'pnpm-lock.yaml' -o -name 'package-lock.json' \
-o -name 'yarn.lock' -o -name 'poetry.lock' -o -name 'Pipfile.lock' \
-o -name 'requirements.txt' -o -name 'go.sum' -o -name 'Cargo.lock' \
-o -name 'composer.lock' -o -name 'Gemfile.lock' \) -print -quit | grep -q .; then
echo "Inga lasfiler i repot - OSV-Scanner har inget att scanna."
exit 0
fi
cfg=""
if [ -f "/repo/osv-scanner.toml" ]; then cfg="--config=/repo/osv-scanner.toml"; fi
set +e
docker run --rm --cpus 2 --memory 4g -v "$SCAN_VOLUME:/repo" -w /repo \
ghcr.io/google/osv-scanner:v2.7.1 scan source --recursive $cfg /repo > /tmp/scan.log 2>&1
rc=$?
set -e
tail -n 120 /tmp/scan.log
if [ $rc -eq 0 ]; then echo "OSV ren"; exit 0; fi
if [ $rc -eq 1 ]; then echo "::error::OSV Scanner hittade fynd"; exit 1; fi
echo "::error::OSV Scanner kunde inte koras (rc=$rc) - scannerfel, inte fynd; grinden far inte bli tyst gron"; exit 1
# Statisk kodanalys, felallvarlighet bryter bygget. Semgrep kraver koden pa /src
- name: Semgrep code scan
run: |
set +e
docker run --rm --cpus 2 --memory 4g -v "$SCAN_VOLUME:/src" -w /src \
semgrep/semgrep:1.183.0 semgrep scan --config=p/ci --error --quiet > /tmp/scan.log 2>&1
rc=$?
set -e
tail -n 120 /tmp/scan.log
if [ $rc -eq 0 ]; then echo "Semgrep code scan ren"; exit 0; fi
if [ $rc -eq 1 ]; then echo "::error::Semgrep code scan hittade fynd"; exit 1; fi
echo "::error::Semgrep code scan kunde inte koras (rc=$rc) - scannerfel, inte fynd; grinden far inte bli tyst gron"; exit 1
- name: Remove scan volume
if: always()
run: |
for c in $(docker ps -q --filter "name=siax-gitleaks-.*-${GITHUB_RUN_ID}-${GITHUB_RUN_ATTEMPT}"); do docker kill "$c" >/dev/null 2>&1 || true; done
docker volume rm -f "${SCAN_VOLUME:-none}" >/dev/null 2>&1 || true
+3
View File
@@ -0,0 +1,3 @@
{
"exemptions": []
}
+38
View File
@@ -0,0 +1,38 @@
# AGENTS.md — scrape-console
Guide för AI-agentar och mänskliga bidragsgivare i detta repo.
**Ägare:** SIAX Technology AB. Kanoniskt repo: https://git.siax.io/admin/scrape-console
(alla speglar är sekundära).
## Regler
- **PR-only.** Ändringar går via pull request med gröna required checks; inga
direkta pushar till `main` och inga skript som slår av branch protection.
- **Inga destruktiva git-kommandon** i automatiska svep (`reset --hard`,
`clean -fdx`, `push --force`, `checkout .`).
- **Hemligheter** ligger i Proton Pass (valv `SIAX`) och Infisical — aldrig i
argv, logg, prompt eller commit.
- **Grindar:** G1 = ingen radering/dataplansändring utan verifierad backup;
G2 = ingen server-reboot eller Docker-data-root-flytt; G3 = Simons ja krävs
för köp, Hetzner Robot/brandvägg, credential-rotation och utskick.
- **En skrivande agent per server**, och två agenter delar aldrig en arbetskopia.
Normativ källa: `admin/server-config` (`AGENTS.md`, regel 1–15) och
`admin/siax-standard` (`standard/agents/DELEGATION-POLICY.md`,
`standard/infra-ops/`).
## Verifiering innan push
Kör det repot själv definierar — ändra inte betydelsen av befintliga tasks:
```sh
ls mise.toml package.json 2>/dev/null # välj rätt toolchain
# Node: npm run typecheck && npm test && npm run lint
# Python: pytest / ruff enligt repots konfiguration
# Skript: bash -n <skript>
```
`CI` (`.gitea/workflows/ci.yml`) och `security` (`.gitea/workflows/security.yml`)
ska vara gröna. Security-gaten är findings-only: den rapporterar fynd men
blockerar inte på scannerfel.
+18
View File
@@ -0,0 +1,18 @@
SIAX Proprietary License
Copyright (c) 2026 SIAX Technology AB. All rights reserved.
SPDX-License-Identifier: LicenseRef-SIAX-Proprietary
This software and its source code are proprietary and confidential.
1. No license, express or implied, is granted except by a separate written
agreement signed by SIAX Technology AB.
2. Copying, modifying, distributing, sublicensing or deploying this software
outside SIAX Technology AB's own systems requires such an agreement.
3. Third-party components included in or fetched by this repository remain
under their own licenses; see the dependency lockfile and NOTICE files.
4. THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT.
Questions about licensing: legal@siax.io
+77
View File
@@ -0,0 +1,77 @@
{
"$schema": "https://git.siax.io/admin/siax-standard/raw/branch/main/schema/siax.repo.v3.schema.json",
"standardVersion": "3.0",
"repo": "scrape-console",
"tier": "product",
"category": "business",
"subcategory": "scraping-console",
"appId": null,
"appIdJustification": "Inget appId i CL0UD APP_REGISTRY. Appen är ett internt skrapningsverktyg (konsol) och har inte fått något registrerat appId — appId sätts inte till ett påhittat värde.",
"owner": "SIAX Technology AB",
"lifecycle": "active",
"operationalState": "running",
"gitHost": "git.siax.io",
"node": "server7",
"nodeNote": "Primär nod server7 (scrape-console-s7, scrape.siax.dev). En migrerad instans finns även på server6 (scrape-console-migrated); manifestet deklarerar den primära noden.",
"runtime": {
"language": "python",
"packageManager": "none"
},
"canonical": true,
"parentRepo": null,
"capabilities": [],
"surfaces": [
"ui",
"api"
],
"contracts": {},
"identity": {
"workloadIdentity": false,
"tenantScoped": false
},
"persistence": {
"stateful": true,
"database": "none",
"storage": "other"
},
"deployment": {
"dedicated": false,
"node": "server7",
"environments": [
"prod"
]
},
"observability": {
"health": true,
"ready": false,
"metrics": false,
"otel": false
},
"reliability": {
"backupFrequency": "none",
"provenRestore": false,
"rollback": false,
"slo": false
},
"licenses": {
"spdx": "LicenseRef-SIAX-Proprietary",
"approved": true
},
"productionEvidence": {
"verified": true,
"lastVerifiedAt": "2026-11-12",
"evidenceRef": "application-config inventory 2026-11-12: coolify:application:scrape-console-s7 = running/healthy, RT-02 true"
},
"consumes": [],
"consumedBy": [],
"replacesSaaS": [],
"children": [],
"engines": [],
"domains": [
{
"fqdn": "scrape.siax.dev",
"env": "prod",
"purpose": "Scrape-konsolens webbgränssnitt"
}
]
}