Skip to content

Commit

Permalink
📝 update content
Browse files Browse the repository at this point in the history
  • Loading branch information
XiangcongMeng committed May 29, 2024
1 parent e7fb0eb commit 46e68db
Showing 1 changed file with 246 additions and 1 deletion.
247 changes: 246 additions & 1 deletion pages/posts/Windows 下 docker 使用笔记.md
View file
Original file line number Diff line number Diff line change
Expand Up @@ -13,7 +13,252 @@ type: yuque

**Docker 伟大，无需多言！**

> 但是 Windows 下的 Docker 使用体验像吃了那个。
![image.png](https://s2.loli.net/2024/05/28/17kjdQVX35ieZvb.png)

<!-- more -->
docker container run -p 6378:6379 redis:latest
## 一些简单的常用命令

```bash
# 显示当前容器 IP
hostname -i
```

你可以使用命令 `netsh int ipv4 show dynamicport tcp` 查看当前的“TCP 动态端口范围”

还可使用 `netsh int ipv4 show excludedportrange protocol=tcp` 查看当前已经被征用的端口



## RocketMQ 启动服务踩坑

第一步，pull 镜像

```
# 最新(rocketmq)
docker pull rocketmqinc/rocketmq
# 指定版本号(rocketmq)
docker pull rocketmqinc/rocketmq:<版本号># 最新(RocketMQ控制台)
docker pull pangliang/rocketmq-console-ng
```

第二步，搞一个 `broker.conf`

可以从启动的容器里拿到宿主机本地，也可以自己写，以下是配置文件描述

```
# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements. See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License. You may obtain a copy of the License at
#
# http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.
# brokerClusterName = DefaultCluster
# brokerName = broker-a
# brokerId = 0
# deleteWhen = 04
# fileReservedTime = 48
# brokerRole = ASYNC_MASTER
# flushDiskType = ASYNC_FLUSH
ongPollingEnable=true
offsetCheckInSlave=false
# nameServer地址，分号分割
namesrvAddr=172.16.234.150:9876
fetchNamesrvAddrByAddressServer=false
#是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
#是否允许 Broker 自动创建Topic，建议线下开启，线上关闭
autoCreateTopicEnable=true
sendThreadPoolQueueCapacity=100000
clusterTopicEnable=true
filterServerNums=1
pullMessageThreadPoolNums=20
# broker名字，名字可重复,为了管理,每个master起一个名字,他的slave同他,eg:Amaster叫broker-a,他的slave也叫broker-a
brokerName=knBroker
#rocketmqHome=/usr/local/alibaba-rocketmq/
sendMessageThreadPoolNums=24
# 0 表示 Master，>0 表示 Slave
brokerId=0
brokerIP1=172.16.234.150
brokerTopicEnable=true
brokerPermission=6
shortPollingTimeMills=1000
clientManageThreadPoolNums=16
adminBrokerThreadPoolNums=16
flushConsumerOffsetInterval=5000
flushConsumerOffsetHistoryInterval=60000
# 在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=8
rejectTransactionMessage=false
notifyConsumerIdsChangedEnable=true
pullThreadPoolQueueCapacity=100000
# # 所属集群名字
brokerClusterName=DefaultCluster
putMsgIndexHightWater=600000
maxTransferBytesOnMessageInDisk=65536
#检测物理文件磁盘空间
diskMaxUsedSpaceRatio=75
checkCRCOnRecover=true
haSlaveFallbehindMax=268435
deleteConsumeQueueFilesInterval=100
cleanResourceInterval=10000
maxMsgsNumBatch=64
flushConsumeQueueLeastPages=2
syncFlushTimeout=5000
#删除文件时间点，默认凌晨 4点
deleteWhen=04
#Broker 的角色
brokerRole=ASYNC_MASTER
destroyMapedFileIntervalForcibly=120000
#commitLog每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
haSendHeartbeatInterval=5000
#刷盘方式
flushDiskType=ASYNC_FLUSH
cleanFileForciblyEnable=true
haHousekeepingInterval=20000
redeleteHangedFileInterval=120000
#限制的消息大小
maxMessageSize=524288
flushCommitLogTimed=false
haMasterAddress=
maxTransferCountOnMessageInDisk=4
flushIntervalCommitLog=1000
#文件保留时间，默认 48 小时
fileReservedTime=72
flushCommitLogThoroughInterval=10000
maxHashSlotNum=5000
maxIndexNum=20000
messageIndexEnable=true
#存储路径
storePathRootDir=/root/store
#commitLog 存储路径
storePathCommitLog=/root/store/commitlog
#消费队列存储路径存储路径
storePathConsumeQueue=/root/store/consumequeue
#消息索引存储路径
storePathIndex=/root/store/index
haListenPort=10912
flushDelayOffsetInterval=10000
haTransferBatchSize=32768
deleteCommitLogFilesInterval=100
maxTransferBytesOnMessageInMemory=262144
accessMessageInMemoryMaxRatio=40
flushConsumeQueueThoroughInterval=60000
flushIntervalConsumeQueue=1000
maxTransferCountOnMessageInMemory=32
messageIndexSafe=false
#ConsumeQueue每个文件默认存30W条，根据业务情况调整
mapedFileSizeConsumeQueue=6000000
messageDelayLevel=1s 5s 10s 30s 1m 2m 3m 4m 5m 6m 7m 8m 9m 10m 20m 30m 1h 2h
flushCommitLogLeastPages=4
serverChannelMaxIdleTimeSeconds=120
#Broker 对外服务的监听端口
listenPort=10911
serverCallbackExecutorThreads=0
serverAsyncSemaphoreValue=64
serverSocketSndBufSize=131072
serverSelectorThreads=3
serverPooledByteBufAllocatorEnable=false
serverWorkerThreads=8
serverSocketRcvBufSize=131072
serverOnewaySemaphoreValue=256
clientWorkerThreads=4
connectTimeoutMillis=3000
clientSocketRcvBufSize=131072
clientOnewaySemaphoreValue=2048
clientChannelMaxIdleTimeSeconds=120
clientPooledByteBufAllocatorEnable=false
clientAsyncSemaphoreValue=2048
channelNotActiveInterval=60000
clientCallbackExecutorThreads=2
clientSocketSndBufSize=131072
```

第三步，Docker 启动 RocketMQ

这里踩了几个坑：

1. **盘符**：Windows 盘符（如 `D:`）在 Docker for Windows 中需要小写并转换为 `/d/` 这种形式。
2. 确保本地路径在 Windows 上**存在并且正确**。

路径搞定之后又遇到错误：

`docker: Error response from daemon: Ports are not available: exposing port TCP 0.0.0.0:10911 -> 0.0.0.0:0: listen tcp 0.0.0.0:10911: bind: An attempt was made to access a socket in a way forbidden by its access permissions.`

一开始是以为没有用管理员权限开 cmd，导致不让绑定端口映射，但是其实不是。

冒号前宿主后容器，试了端口号±1的都不行，但是之前启动 Redis 的时候 6378 是可以用的，同时本地启 Spring 服务的 8080 前后几个也能用，于是先用 80xx 的端口做了替代，反正不影响使用。

**然后搜了一下原因：**

> 进入正题，为什么会发生这个错误？这里不得不说明一下两个和问题有关的特性。
>
> - Windows 中个东西叫做“TCP 动态端口范围”，这个范围内的端口有时候会被一些服务占用。在 Windows Vista（或 Windows Server 2008）之前，动态端口范围是 1025 到 5000；在其之后的版本中，新的默认起始端口为 49152，新的默认结束端口为 65535。
> - 如果安装了 Hyper-V，则 Hyper-V 会保留一些随机端口号供 Windows [容器](https://cloud.tencent.com/product/tke?from_column=20065&from=20065)主机网络服务使用。
>
> 一般情况（正常情况下）Hyper-V 会在“TCP 动态端口范围”中预留一些随机的端口号，但是预留的端口号一般都很大，所以即使预留了成百上千个端口，也影响不大。但是 Windows 自动更新有时会出错（万恶的自动更新），把“TCP 动态端口范围”起始端口被重置为 1024，导致 Hyper-V 在预留端口的时候占用了常用端口号，使得一些常用端口因为被预留而无法使用。
>
> 你可以使用命令 `netsh int ipv4 show dynamicport tcp` 查看当前的“TCP 动态端口范围”，还可使用 `netsh int ipv4 show excludedportrange protocol=tcp` 查看当前已经被征用的端口。
我用的引擎其实是 WSL 2，好像是跟这个 Hyper-V 没关系，但是本着刨根问底的原则，查了一下被征用的端口：

```bash
协议 tcp 端口排除范围

开始端口 结束端口
---------- --------
1044 1143
1144 1243
1244 1343
1344 1443
1457 1556
1842 1941
2666 2765
10776 10875
10876 10975
* 10976 11075
11076 11175
11176 11275
11276 11375
11376 11475
50000 50059 *
54288 54288

* - 管理的端口排除。
```

可以看到 10911/10910 端口确实是在被征用的范围内的（我在输出结果中用 * 标记了），那么应该就是因为 Hyper-V 随机征用端口导致的。

于是去问了一下 ChatGPT：

> wsl2底层实现使用了 hyper-v？
>
> ChatGPT
>
> 是的，WSL 2 的底层实现确实使用了 Hyper-V 技术。这是因为 WSL 2 采用了完全虚拟化的方式，与 WSL 1 不同，它使用了 Hyper-V 虚拟化平台来运行 Linux 内核。这种设计使得 WSL 2 在性能和功能上有了显著提升，并且能够提供更接近于本机 Linux 环境的体验。
>
> 下面是 WSL 2 使用 Hyper-V 的一些关键点：
>
> 1. **完全虚拟化**：WSL 2 采用完全虚拟化的方式，每个 WSL 2 发行版都运行在一个 Hyper-V 虚拟机中，这个虚拟机拥有自己的 Linux 内核。
> 2. **Hyper-V 技术**：Hyper-V 是 Windows 操作系统中的虚拟化平台，可以创建和管理虚拟机。WSL 2 利用了 Hyper-V 的功能来创建和运行 Linux 发行版。
> 3. **性能优势**：相比于 WSL 1，WSL 2 的性能更好。因为它使用了 Hyper-V 的硬件虚拟化技术，能够提供更快的启动速度、更好的文件系统性能和更好的兼容性。
> 4. **隔离性**：每个 WSL 2 发行版运行在独立的 Hyper-V 虚拟机中，提供了更好的隔离性。这意味着不同的 WSL 2 发行版之间互不影响，而且可以与 Windows 本机环境隔离开来。
>
> 虽然 WSL 2 使用了 Hyper-V 技术，但用户在使用 WSL 2 时并不需要直接管理 Hyper-V 虚拟机。WSL 2 提供了简单易用的命令行工具和界面，让用户可以方便地管理和使用 Linux 发行版，而无需深入了解 Hyper-V 的操作。
---

0 comments on commit 46e68db

Please sign in to comment.