hdykokd.me

Kustomizeで共通で定義したいフィールドを埋め込む

hdykokd — Wed, 06 Sep 2023 18:34:02 +0900

1
2
3


$ kubectl vesrion
Client Version: v1.28.1
Kustomize Version: v5.0.4-0.20230601165947-6ce0bf390ce3

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19


configMapGenerator:
 - name: datadog-config
 options:
 disableNameSuffixHash: true
 literals:
 - DD_AGENT_HOST=status.hostIP
replacements:
 - source:
 kind: ConfigMap
 name: datadog-config
 fieldPath: data.DD_AGENT_HOST
 targets:
 - select:
 kind: Deployment
 group: apps
 fieldPaths:
 - spec.template.spec.containers.*.env.[name=DD_AGENT_HOST].valueFrom.fieldRef.fieldPath
 options:
 create: true

Node.jsでDogStatsDにCustom Metricsを送信する

hdykokd — Thu, 31 Aug 2023 13:07:43 +0900

References

https://docs.datadoghq.com/metrics/custom_metrics/dogstatsd_metrics_submission/

Code

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


import tracer from 'dd-trace';

const hostname = process.env.DD_AGENT_HOST;
const env = process.env.NODE_ENV;
tracer.init({
 env: env,
 hostname: hostname,
 dogstatsd: {
 hostname: hostname,
 },
 service: 'service',
 tags: [`env:${env}`],
}
export default tracer;

DatadogのMulti-line aggregationを構成する

hdykokd — Thu, 31 Aug 2023 11:22:00 +0900

ログ収集の高度な構成

複数行の自動検出は、以下の日付/時刻形式から始まり、それに準拠するログを検出します: RFC3339、ANSIC、Unix Date Format、Ruby Date Format、RFC822、RFC822Z、RFC850、RFC1123、RFC1123Z、RFC3339Nano、Java ロギング SimpleFormatter デフォルト日付書式。

具体的な正規表現はこれ

設定例

1
2
3
4
5


logs_config:
 auto_multi_line_detection: true
 auto_multi_line_extra_patterns:
 - \d{4}\-(0?[1-9]|1[012])\-(0?[1-9]|[12][0-9]|3[01])
 - '[A-Za-z_]+ \d+, \d+ \d+:\d+:\d+ (AM|PM)'

1
2
3
4
5
6
7


containers:
 agent:
 env:
 - name: DD_LOGS_CONFIG_AUTO_MULTI_LINE_DETECTION
 value: "true"
 - name: DD_LOGS_CONFIG_AUTO_MULTI_LINE_EXTRA_PATTERNS
 value: '^23-03.*'

Goのlog packageの書式

2023/08/31 01:48:35 になる。これはDatadogのauto multineではサポートされていない書式。

Goのグローバルにインストールしたバイナリのリポジトリを抽出する

hdykokd — Mon, 28 Aug 2023 16:46:51 +0900

1

cd $GOPATH/bin && ls -1 . | xargs -I{} go version -m {} | grep -oE 'path\s+(.*)' | awk '{ print $2 "@latest" }'

Macで特定のアプリをアクティブにするホットキー

hdykokd — Mon, 21 Aug 2023 13:53:23 +0900

元ネタ: Macで特定アプリをアクティブにするホットキーを作ってみた | DevelopersIO
同様のことをskhdで行っていたのだが、Raycastでできるならまとめてしまおうと思って試した。

欲を言うと、iTerm2純正の（トグル操作の）ホットキーに比べるとレスポンスはちょっと遅いです。純正の方は「押した瞬間に切り替わってる」レベルなのに対して、こちらは「キーを離したら変わる」くらいの感覚です（適当）。初回は特に遅くてちょっと待たされる感じがあるのですが、何回か使っていると特に気にならないレベルのレスポンスになる印象です。

自分もここが気になったのでレスポンスを改善したバージョンを作ってみた。
起動している場合はfrontに持ってくる、起動していない場合はactivateとすることでレスポンスが早くなった。

#!/usr/bin/osascript
# Required parameters:
# @raycast.schemaVersion 1
# @raycast.title Open Google Chrome
# @raycast.mode silent
# Optional parameters:
# @raycast.icon
# Documentation:
# @raycast.author hdykokd
# @raycast.authorURL https://raycast.com/hdykokd
tell application "System Events"
if exists process "Google Chrome" then
tell process "Google Chrome"
set frontmost to true
end tell
else
tell application "Google Chrome"
activate
end tell
end if
end tell

DatadogのKubernetes manifestの設定

hdykokd — Fri, 18 Aug 2023 23:56:37 +0900

Deployment

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25


apiVersion: apps/v1
kind: Deployment
metadata:
 namespace: app
 name: server-a
 labels:
 app: server-a
 tags.datadoghq.com/env: environment
 tags.datadoghq.com/service: server-a
 tags.datadoghq.com/version: v1
spec:
 template:
 metadata:
 labels:
 app: server-a
 tags.datadoghq.com/env: environment
 tags.datadoghq.com/service: server-a
 tags.datadoghq.com/version: v1
 annotations:
 ad.datadoghq.com/server-a.logs: '[{"source":"mysource","service":"server-a"}]'
 spec:
 containers:
 - name: server-a
 image: ...
 ...

Cronjob

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41


apiVersion: batch/v1 
kind: CronJob 
metadata:
 namespace: app 
 name: cronjob-a 
 labels:
 app: cronjob-a 
 tags.datadoghq.com/env: environment 
 tags.datadoghq.com/service: cronjob-a 
 tags.datadoghq.com/version: v1 
spec:
 jobTemplate:
 spec:
 template:
 metadata:
 labels:
 app: cronjob-a 
 tags.datadoghq.com/service: cronjob-a 
 tags.datadoghq.com/version: v1 
 annotations:
 ad.datadoghq.com/cronjob-a.logs: '[{"source":"mysource","service":"cronjob-a"}]'
 containers:
 - name: cronjob-a 
 image: image:tag 
 env:
 - name: DD_AGENT_HOST 
 valueFrom:
 fieldRef:
 fieldPath: status.hostIP 
 - name: DD_ENV 
 valueFrom:
 fieldRef:
 fieldPath: metadata.labels['tags.datadoghq.com/env'] 
 - name: DD_SERVICE 
 valueFrom:
 fieldRef:
 fieldPath: metadata.labels['tags.datadoghq.com/service'] 
 - name: DD_VERSION 
 valueFrom:
 fieldRef:
 fieldPath: metadata.labels['tags.datadoghq.com/version']

StatefulSet

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22


apiVersion: apps/v1
kind: StatefulSet
metadata:
 name: statefulset-a
 namespace: app
spec:
 serviceName: 'statefulset-a'
 replicas: 1
 selector:
 matchLabels:
 app: statefulset-a
 template:
 metadata:
 labels:
 app: statefulset-a
 tags.datadoghq.com/env: environment
 tags.datadoghq.com/service: statefulset-a
 tags.datadoghq.com/version: v1
 annotations:
 ad.datadoghq.com/statefulset-a.logs: '[{"source":"mysource","service":"statefulset-a"}]'
 spec:
 ...

Datadog Agent(Docker)にCustom Metricsを送信できるようにする

hdykokd — Fri, 18 Aug 2023 18:44:38 +0900

Datadog Agentのcontainerを起動する

Datadog AgentがDogStatsDのデーモンも起動しているcontainerを立ち上げれば送信できるようになる。
udp portを設定する。

1
2
3
4
5
6


docker pull datadog/agent:latest
docker run --rm --name datadog-agent \
 -e DD_API_KEY=<YOUR_DATADOG_API_KEY> \
 -e DD_DOGSTATSD_NON_LOCAL_TRAFFIC=true \
 -p 8125:8125/udp \
 datadog/agent:latest

Standaloneで立ち上げることもできるみたい。
GitHub - DataDog/docker-dd-agent: Datadog Agent Dockerfile for Trusted Builds.

Datadog Agentでホストのアプリケーションをtraceする

hdykokd — Fri, 18 Aug 2023 18:44:38 +0900

Tracing Docker Applications

1
2
3
4
5
6
7
8
9


docker run --rm --name dd-agent --cgroupns host --pid host \
 -v /var/run/docker.sock:/var/run/docker.sock:ro \
 -v /proc/:/host/proc/:ro \
 -v /sys/fs/cgroup/:/host/sys/fs/cgroup:ro \
 -p 127.0.0.1:8126:8126/tcp \
 -e DD_APM_ENABLED=true \
 -e DD_SITE=<region>.datadoghq.com \
 -e DD_API_KEY=<api_key> \
 gcr.io/datadoghq/agent:latest

Goでdd-traceを設定する

hdykokd — Fri, 18 Aug 2023 18:44:38 +0900

Installation

1
2


go get gopkg.in/DataDog/dd-trace-go.v1/ddtrace/tracer
go get gopkg.in/DataDog/dd-trace-go.v1/profiler

Start tracer

1
2
3
4
5
6
7
8


// "gopkg.in/DataDog/dd-trace-go.v1/ddtrace/tracer"

tracer.Start(
 tracer.WithHostname(os.Getenv("DD_AGENT_HOST")),
 tracer.WithService("service-a"),
 tracer.WithEnv("environment"),
)
defer tracer.Stop()

Setup Middleware

go-chi/chi

1
2
3
4
5
6


// "github.com/go-chi/chi/v5"
// "github.com/go-chi/chi/v5/middleware"
// chitrace "gopkg.in/DataDog/dd-trace-go.v1/contrib/go-chi/chi.v5"

r := chi.NewRouter()
r.Use(chitrace.Middleware(chitrace.WithServiceName("service-a")))

Start Datadog Agent

Datadog Agentでホストのアプリケーションをtraceする

GoでDogStatsDにCustom Metricsを送信する

hdykokd — Fri, 18 Aug 2023 18:44:38 +0900

References

https://docs.datadoghq.com/metrics/custom_metrics/dogstatsd_metrics_submission/

Code

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18


var Dogstatsd *statsd.Client

func InitializeDogstatsd(host string, port string, env string, options ...statsd.Option) {
 if host == "" && env == "development" {
 host = "127.0.0.1"
 }

 tags := []string{
 "env:" + env,
 }
 options = append(options, statsd.WithTags(tags))
 addr := host + ":" + port
 statsd, err := statsd.New(addr, options...)
 if err != nil {
 log.Fatalf("failed to initialize statsd client: %s", err)
 }
 Dogstatsd = statsd
}

Node.jsでdd-traceを設定する

hdykokd — Fri, 18 Aug 2023 18:44:38 +0900

Installation

1

pnpm add dd-trace --save

tracerを起動する

1
2
3
4
5
6
7
8
9


import tracer from 'dd-trace';

tracer.init({
env: process.env.NODE_ENV,
hostname: process.env.DD_AGENT_HOST,
service: 'server',
});

export default tracer;

このスクリプトをserverのentrypointでimportする。

Docketコンテナ内で動くGoのサーバーにデバッガを設定する

hdykokd — Thu, 17 Aug 2023 21:24:25 +0900

Dockerコンテナで動くGoアプリをDelveを使ってデバッグできるようにするのが色々と苦戦したのでメモ。
Delveを使う。

Dockerfile

1
2
3
4
5
6
7


FROM golang:1.19

WORKDIR /app

RUN go install github.com/go-delve/delve/cmd/dlv@latest

CMD ["dlv", "debug", "./main.go", "--listen=:2345", "--headless", "--api-version=2", "--continue", "--accept-multiclient"]

Delve

`--api-version=2`

`--continue`

`--accept-multiclient`

Docker Compomse

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14


version: '3'
services:
 golang-docker:
 init: true
 build:
 context: ./
 dockerfile: ./Dockerfile
 security_opt:
 - seccomp:unconfined
 volumes:
 - server-a-go-mod:/go/pkg/mod
 - server-a-go-build:/root/.cache/go-build
 ports:
 - '2345:2345'

`security_opt seccomp:undefined`

launch.json

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26


{
 "version": "0.2.0",
 "configurations": [
 {
 "name": "Connect to server",
 "type": "go",
 "request": "attach",
 "mode": "remote",
 "port": 2345,
 "host": "127.0.0.1",
 "substitutePath": [
 {
 "from": "${workspaceFolder}",
 "to": "/app"
 },
 {
 "from": "${env:GOPATH}",
 "to": "/go"
 },
 {
 "from": "${env:GOROOT}",
 "to": "/usr/local/go"
 }
 ]
 }
}