見出し画像

米国AI開発者がゼロから教えるDocker講座⑤（かめさん）〜ホストとコンテナの関係を理解する〜

みずぺー | コンサル×AI×公共事業（河川、道路）

初めまして、みずぺーといいます。
このnoteを機に初めて私を知った方のために、箇条書きで自己紹介を記述します。

  • 年齢：28歳

  • 出身：長崎

  • 大学：中堅国立大学

  • 専門：河川、河川計画、河道計画、河川環境

  • 転職回数：1回（建設（2年9か月）→IT系年収100万up（現職3か月））

  • IT系の資格：R5.4基本情報技術者試験合格💮

今日は業務でdockerを用いて物体検出環境を構築する業務があるので、そのための予習をしておきます。

あと、この記事だけでは正直理解することは難しいと思います。
そのため、詳しく知りたい方や図解で理解を行いたい方は是非かめさんの動画を参考にしていただければと思います。

-v オプションでホストのファイルシステムをコンテナにマウントする

hostのmounted_folderをContainerの/new_dirにマウントする。

つまりcontainer内でホストのファイルを除くことができる。

コンテナ外でもいろんなcontainerを参照できるようになるので必須の項目である。

docker run -v <host> <container> #実際のコマンド 
docker run -it -v ~/program/docker/udemy_docker/mounted_folder:/new_dir 77add1c275e8 bash

上記のコマンドでcontainer内にhostをマウントできる。

ホストとコンテナのアクセス権限を共有する

コンテナを作成する際にはrootユーザーで作成することがわかっている。

-u <user id>:<group id>

ホストのポートをコンテナのポートに繋げる

ポートをそれぞれのwebサービスに割り当てる。

-p <host_port>:<container_port>

こちらのコマンドでホストとコンテナを繋げる。

今回で言うと

docker run -it -p 8888:8888 --rm jupyter/datascience-notebook bash
jupyter notebook

これでコンテナのnotebookが立ち上がる。
またブラウザから繋げたいときは

localhost::8888

アクセスを行うことができる。

コンテナがアクセスできる上限設定

  • --cpus < # of CPUs>：コンテナがアクセスできる上限のCPUを設定

  • --memory <byte>：コンテナがアクセスできる上限のメモリを設定

macでのCPU・メモリの確認コマンド

ちなみに自分のパソコンがどのくらいのメモリを占めるのかも上限を設定する上では知っておく必要がある。

 #物理コア数 
~/.../docker/udemy_docker
●sysctl -n hw.physicalcpu_max
2
 #論理コア数 
~/.../docker/udemy_docker
●sysctl -n hw.logicalcpu_max 
4
 #メモリ 
~/.../docker/udemy_docker
●sysctl hw.memsize
hw.memsize: 8589934592

私のPCは非力か！！！！！笑
と言うのは置いておいて、

それではここで新たにコンテナを指定のメモリでコンテナを立ち上げて、本当にそうなっているのか確認する。

今回は物理コア数を2、メモリを上限1GBで立ち上げてみる。

docker run -it --cpus 2 --memory 1g ubuntu bash

それでは本当にこのメモリで立ち上がっているのかを確認。

一度コンテナIDを確認するためにコンテナから抜ける。

exit

そして

docker ps -a

確認を行う。

そして

docker inspect <CONTAINER ID>

を入力すると、

●docker inspect a6110efe45d7
[
    {
        "Id": "a6110efe45d7f5ab10257fddc83d225fb9b250167ae38d066e7dfc500ce0e816",
        "Created": "2023-05-05T00:05:57.630862297Z",
        "Path": "bash",
        "Args": [],
        "State": {
            "Status": "exited",
            "Running": false,
            "Paused": false,
            "Restarting": false,
            "OOMKilled": false,
            "Dead": false,
            "Pid": 0,
            "ExitCode": 0,
            "Error": "",
            "StartedAt": "2023-05-05T00:05:58.08750766Z",
            "FinishedAt": "2023-05-05T00:06:00.662391945Z"
        },
        "Image": "sha256:46c8e4185461ba58f67d5641c84d7ff30c436deda604cbb2a89a8c2e732f071d",
        "ResolvConfPath": "/var/lib/docker/containers/a6110efe45d7f5ab10257fddc83d225fb9b250167ae38d066e7dfc500ce0e816/resolv.conf",
        "HostnamePath": "/var/lib/docker/containers/a6110efe45d7f5ab10257fddc83d225fb9b250167ae38d066e7dfc500ce0e816/hostname",
        "HostsPath": "/var/lib/docker/containers/a6110efe45d7f5ab10257fddc83d225fb9b250167ae38d066e7dfc500ce0e816/hosts",
        "LogPath": "/var/lib/docker/containers/a6110efe45d7f5ab10257fddc83d225fb9b250167ae38d066e7dfc500ce0e816/a6110efe45d7f5ab10257fddc83d225fb9b250167ae38d066e7dfc500ce0e816-json.log",
        "Name": "/beautiful_elgamal",
        "RestartCount": 0,
        "Driver": "overlay2",
        "Platform": "linux",
        "MountLabel": "",
        "ProcessLabel": "",
        "AppArmorProfile": "",
        "ExecIDs": null,
        "HostConfig": {
            "Binds": null,
            "ContainerIDFile": "",
            "LogConfig": {
                "Type": "json-file",
                "Config": {}
            },
            "NetworkMode": "default",
            "PortBindings": {},
            "RestartPolicy": {
                "Name": "no",
                "MaximumRetryCount": 0
            },
            "AutoRemove": false,
            "VolumeDriver": "",
            "VolumesFrom": null,
            "ConsoleSize": [
                53,
                155
            ],
            "CapAdd": null,
            "CapDrop": null,
            "CgroupnsMode": "private",
            "Dns": [],
            "DnsOptions": [],
            "DnsSearch": [],
            "ExtraHosts": null,
            "GroupAdd": null,
            "IpcMode": "private",
            "Cgroup": "",
            "Links": null,
            "OomScoreAdj": 0,
            "PidMode": "",
            "Privileged": false,
            "PublishAllPorts": false,
            "ReadonlyRootfs": false,
            "SecurityOpt": null,
            "UTSMode": "",
            "UsernsMode": "",
            "ShmSize": 67108864,
            "Runtime": "runc",
            "Isolation": "",
            "CpuShares": 0,
            "Memory": 1073741824,
            "NanoCpus": 2000000000,
            "CgroupParent": "",
            "BlkioWeight": 0,
            "BlkioWeightDevice": [],
            "BlkioDeviceReadBps": [],
            "BlkioDeviceWriteBps": [],
            "BlkioDeviceReadIOps": [],
            "BlkioDeviceWriteIOps": [],
            "CpuPeriod": 0,
            "CpuQuota": 0,
            "CpuRealtimePeriod": 0,
            "CpuRealtimeRuntime": 0,
            "CpusetCpus": "",
            "CpusetMems": "",
            "Devices": [],
            "DeviceCgroupRules": null,
            "DeviceRequests": null,
            "MemoryReservation": 0,
            "MemorySwap": 2147483648,
            "MemorySwappiness": null,
            "OomKillDisable": null,
            "PidsLimit": null,
            "Ulimits": null,
            "CpuCount": 0,
            "CpuPercent": 0,
            "IOMaximumIOps": 0,
            "IOMaximumBandwidth": 0,
            "MaskedPaths": [
                "/proc/asound",
                "/proc/acpi",
                "/proc/kcore",
                "/proc/keys",
                "/proc/latency_stats",
                "/proc/timer_list",
                "/proc/timer_stats",
                "/proc/sched_debug",
                "/proc/scsi",
                "/sys/firmware"
            ],
            "ReadonlyPaths": [
                "/proc/bus",
                "/proc/fs",
                "/proc/irq",
                "/proc/sys",
                "/proc/sysrq-trigger"
            ]
        },
        "GraphDriver": {
            "Data": {
                "LowerDir": "/var/lib/docker/overlay2/12801413afbd4934d8a02e96d8884367f4117ab5c89923122aaa2aebdcd4524e-init/diff:/var/lib/docker/overlay2/e7bbcf6f7a80c645a9fba10d5ccc3be0725eb50af8ff2fbd92a3c8bbc516a16b/diff:/var/lib/docker/overlay2/947f520578a10c8921b9af4afd17de55c90f764419814e384c0d514928d7d6db/diff",
                "MergedDir": "/var/lib/docker/overlay2/12801413afbd4934d8a02e96d8884367f4117ab5c89923122aaa2aebdcd4524e/merged",
                "UpperDir": "/var/lib/docker/overlay2/12801413afbd4934d8a02e96d8884367f4117ab5c89923122aaa2aebdcd4524e/diff",
                "WorkDir": "/var/lib/docker/overlay2/12801413afbd4934d8a02e96d8884367f4117ab5c89923122aaa2aebdcd4524e/work"
            },
            "Name": "overlay2"
        },
        "Mounts": [],
        "Config": {
            "Hostname": "a6110efe45d7",
            "Domainname": "",
            "User": "",
            "AttachStdin": true,
            "AttachStdout": true,
            "AttachStderr": true,
            "Tty": true,
            "OpenStdin": true,
            "StdinOnce": true,
            "Env": [
                "PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin"
            ],
            "Cmd": [
                "bash"
            ],
            "Image": "46c8e4185461",
            "Volumes": null,
            "WorkingDir": "",
            "Entrypoint": null,
            "OnBuild": null,
            "Labels": {
                "org.opencontainers.image.ref.name": "ubuntu",
                "org.opencontainers.image.version": "22.04"
            }
        },
        "NetworkSettings": {
            "Bridge": "",
            "SandboxID": "177e15cc6bd037ff6aff2281a70ae9b198cf21106a0bf2b253e22863bc030c44",
            "HairpinMode": false,
            "LinkLocalIPv6Address": "",
            "LinkLocalIPv6PrefixLen": 0,
            "Ports": {},
            "SandboxKey": "/var/run/docker/netns/177e15cc6bd0",
            "SecondaryIPAddresses": null,
            "SecondaryIPv6Addresses": null,
            "EndpointID": "",
            "Gateway": "",
            "GlobalIPv6Address": "",
            "GlobalIPv6PrefixLen": 0,
            "IPAddress": "",
            "IPPrefixLen": 0,
            "IPv6Gateway": "",
            "MacAddress": "",
            "Networks": {
                "bridge": {
                    "IPAMConfig": null,
                    "Links": null,
                    "Aliases": null,
                    "NetworkID": "6a6922a9c88ccfddb2ea669cff89907c1aa3a0470ca36eb9f18bf5499a3a819d",
                    "EndpointID": "",
                    "Gateway": "",
                    "IPAddress": "",
                    "IPPrefixLen": 0,
                    "IPv6Gateway": "",
                    "GlobalIPv6Address": "",
                    "GlobalIPv6PrefixLen": 0,
                    "MacAddress": "",
                    "DriverOpts": null
                }
            }
        }
    }
]

。。。。どこにメモリの使用量が書いてあるかわからん！

って状態になるので、

docker inspect <CONTAINER ID> | grep -i cpu

でcpuの記載がされている行をgrep(抜き出す）してくる。

●docker inspect a6110efe45d7 | grep -i cpu
            "CpuShares": 0,
            "NanoCpus": 2000000000,
            "CpuPeriod": 0,
            "CpuQuota": 0,
            "CpuRealtimePeriod": 0,
            "CpuRealtimeRuntime": 0,
            "CpusetCpus": "",
            "CpusetMems": "",
            "CpuCount": 0,
            "CpuPercent": 0,
(base)

とこんな感じで2000000000と出てくるので、これが上限のメモリ。

最後に

詳しく知りたい方や図解で理解を行いたい方は是非かめさんの動画を参考にしていただければと思います。

GW期間中やかめさんのTwitterで定期的に割引（30％OFF）が行われていますので、チェックするようにしていただければと思います。

この記事が気に入ったらサポートをしてみませんか？