Merge remote-tracking branch 'github/pull/638'

Update microsoft authentication ID

Don't allow mail relay via gateway hosts

Use callout verification for domains we are relaying to

Revert "Use callout verification for domains we are relaying to"

This reverts commit f59b522f292def10d39f5bb6e4fbe770add1b5c4.

Use callout verification for domains we are relaying to

hardware: add debian firmware-linux meta package

apt: add debian non-free-firmware repo

Use gamin instead of inotify on Ubuntu

Ensure python modules for log monitoring are installed for fail2ban

Drop special casing of gen10 HP repo for Debian

Use debian 11 chef client on debian 12

stateofthemap: add 2024

Add support for using osm2pgsql-replication on render servers

Allow cgimap to read issues and reports

Merge remote-tracking branch 'github/pull/637'

Enable upload rate limiting for cgimap

Bump test-kitchen from 3.5.0 to 3.5.1

Bumps [test-kitchen](https://github.com/test-kitchen/test-kitchen) from 3.5.0 to 3.5.1.
- [Release notes](https://github.com/test-kitchen/test-kitchen/releases)
- [Changelog](https://github.com/test-kitchen/test-kitchen/blob/main/CHANGELOG.md)
- [Commits](https://github.com/test-kitchen/test-kitchen/compare/v3.5.0...v3.5.1)

---
updated-dependencies:
- dependency-name: test-kitchen
  dependency-type: direct:production
  update-type: version-update:semver-patch
...

Signed-off-by: dependabot[bot] <support@github.com>

Set SECRET_KEY_BASE when delivering messages from email

Set SECRET_KEY_BASE_DUMMY for the statistics script

Set SECRET_KEY_BASE for rails job runners

Set SECRET_KEY_BASE_DUMMY when building assets

Set memory limits for user slices on the dev server

Disable RemoveIPC for reindex services

Enable cgimap with ratelimit-upload option for tomh dev site

Install libxml-twig-perl on the dev server

Use sql_exporter to monitor rails queue lengths

Add support for using sql_exporter to query postgres

Drop rails71 dev site

discourse: increase smtp timeouts

Drop alertmanager API block

The whole of alertmanager is IP restricted anyway.

Allow domain level blocks on email senders

Revert "Allow domain level blocks on email senders"

This reverts commit a54ccb43f33b675eed9ff85da0eebc951f0558c0.

Allow domain level blocks on email senders

planet: allow redirect to eu or us bucket for all years

planet: wait for s3 replication to complete

planet: add S3 buckets to torrents

planet: first copy to s3

Configure moderator limits for cgimap explicitly

podman: workaround ubuntu 22.04 crun bug

podman: avoid starting and immediate restart on first run

civicrm + extensions version bump

Install libbytes-random-secure-perl on the dev server

dns: bump dnscontrol to v4.6.0

Publish global state for changesets after local state

planet: also sync to s3 changeset state config file

Use S3 as the source for replication diffs for render servers

planet: cleanup redirects and add replication diff redirects

Avoid double call to ip2region; consolidate rewrite conditions

Use dual stack (IPv4/IPv6) S3 endpoints for public-facing planet

Fixes https://github.com/openstreetmap/operations/issues/983

Switch palulukon to use postgres 16

Make prometheus backup service fail on error

Allow prometheus backup server to acess AWS cache

Silence curl progress messages

Enable prometheus backup timer

Merge remote-tracking branch 'github/pull/631'

Backup prometheus data to S3

Disable progress messages for osm2pgsql

Switch piasa to use postgres 16

planet: increase AWS upload max_bandwidth

Enable prometheus admin API

Make prometheus API blocks work

Block external access to prometheus admin API

Install libyaml-dev for rails

civicrm version bump, corrected extension name

Stop trying to URI encode passwords

Make postgres exporter connect as the prometheus user

Grant roles to newly created users

Remove some old cleanup code

Add a prometheus user to all postgres clusters

Add support for granting roles to postgres users

Switch nidhogg to use postgres 16

Switch culebre to use postgres 16

Add alert for interface redundancy

Report bond mode for bonded interfaces

oxidized: add libyaml-dev requirement

Use the directory name as the certificate name for uploads

Statically configure backup replication metrics

Set roundingPeriod explicitly for all jobs

Split daily metrics into separate jobs

Look back two days for S2 daily statistics

Revert "cloudwatch: add eu-north-1 for osm-main to collect replication metrics"

This reverts commit 7e0c2e2982f696e3d1e57c6ec4889fe1e6038446.

Revert "cloudwatch: Own job for Replication Metrics"

This reverts commit 6c92319de16d70a02efabb29a4ea2d84e83b8acc.

cloudwatch: Own job for Replication Metrics

cloudwatch: add eu-north-1 for osm-main to collect replication metrics

Fix query interval for billing metrics

cloudwatch: Add other billed accounts

Add monitoring for AWS billing metrics

Add monitoring for some EC2 metrics

Install awscli on prometheus server

cloudwatch: add account name comment

cloudwatch: add sts-region

Add dummy openid connect key for tests

Add additional roles and regions to S3 monitoring

Enable some optional features for the cloudwatch exporter

Restart cloudwatch exporter when the configuration changes

Increase period for daily S3 metrics

Configure cloudwatch exporter to collect S3 metrics

Send osmdbt log files to S3

Add AWS credentials for osmdbt uploads