V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  luger1990  ›  全部回复第 1 页 / 共 1 页
回复总数  18
2020-04-15 11:11:06 +08:00
回复了 luger1990 创建的主题 Docker docker swarm 的 overlay 网络性能问题
建议如果有足够的人力还是用 k8s,没必要尝试 swarm
2020-04-15 11:10:22 +08:00
回复了 luger1990 创建的主题 Docker docker swarm 的 overlay 网络性能问题
解决问题了,具体可以参考 https://stackoverflow.com/questions/59392603/overlay-network-performance-issues-with-docker-swarm#59392603

```
sudo nsenter --net=/var/run/docker/netns/{your_load_balancer} sysctl -w net.ipv4.vs.conn_reuse_mode=0
sudo nsenter --net=/var/run/docker/netns/{your_load_balancer} sysctl -w net.ipv4.vs.expire_nodest_conn=1
```

```
version: "3.7"
services:
core:
image: nginx
sysctls:
- net.ipv4.vs.conn_reuse_mode=0
- net.ipv4.vs.expire_nodest_conn=1
```
2019-12-17 14:36:11 +08:00
回复了 luger1990 创建的主题 Docker docker swarm 的 overlay 网络性能问题
@monsterxx03 用你的方法输出日志试了试,看来主要是`upstream_connect_time` 这个时间比较长。并不是所有的都要 1S 是部分 但是也挺多的
2019-12-17 12:11:24 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
解决问题了 可以参考 http://keithmo.me/post/2018/08/25/conntrack-tuning/ 这个文章 增大 nf_conntrack_max 这个参数即可
2019-10-09 10:25:42 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
应该就是防火墙的问题,关了防火墙用 host 模式启动 nginx 就没问题。
2019-09-26 09:50:49 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
@Reficul 我联系运维同事看看 如果查不到怎么解决的话我也打算关了防火墙
2019-09-26 09:50:24 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
@onionlc 好 我联系运维同事帮忙看看
2019-09-26 09:50:11 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
@julyclyde 这还是不行的。。。
2019-09-25 11:02:25 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
@Reficul 是从大前端都没有到我的业务 nginx,业务 nginx 提示 nf_conntrack: table full, dropping packet “连接跟踪表已满,开始丢包”
2019-09-25 11:02:16 +08:00
回复了 luger1990 创建的主题 问与答 docker host 模式起的 nginx 量大的时候会有大量 502
@haiyang416 是从大前端都没有到我的业务 nginx,业务 nginx 提示 nf_conntrack: table full, dropping packet “连接跟踪表已满,开始丢包”
2019-07-14 12:52:11 +08:00
回复了 luger1990 创建的主题 Docker redis、nginx 适合使用 docker swarm 自定义网络吗
@mzdblsw8 但是我发现从容器中访问非容器中的 redis 性能也会差很多。。。
2018-06-09 11:36:13 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
解决问题了,最后选用的是布隆过滤器。
2018-05-01 23:16:35 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
@googlefans 我还没看到 看来我看的还不够多
2018-04-30 10:23:49 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
@kslr 但是还得记录每个用户看过的视频 用户基数大 就会导致占用内存太大
2018-04-30 10:23:10 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
@murmur 我是想怎么存储用户看过的如果用 redis 的 set 或者 hash 存储用户看过的那么占用的内存太大了,因为用户基数大
2018-04-30 10:21:46 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
@yidinghe 不是 是总共一百万条视频 单个人能刷完这 100W 条视频 每次刷到的都是自己以前没看过的
2018-04-30 00:14:15 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
@murmur 是给所有用户随机推荐全部的视频,和抖音类似 但是不能重复推荐 最终所有人都能看到全部视频
2018-04-30 00:01:31 +08:00
回复了 luger1990 创建的主题 算法 千万用户推荐去重算法
@murmur 哈哈哈 牛逼
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5793 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 17ms · UTC 01:42 · PVG 09:42 · LAX 17:42 · JFK 20:42
Developed with CodeLauncher
♥ Do have faith in what you're doing.