各位码农公司里面有使用go语言的项目吗 |
怎么扛住访问压力的?
瓶颈不是在大模型侧么?
这 http server的玩意万一压力真的太大了,可以用类似的 nignx 的网关,实现低成本用 n 多台机器分摊 http 请求压力啊
倒是大模型刚出来,还没看见有成熟的集群/分布式拓展工具和架构方案,帮助大模型分摊内容生成的计算压力
@IDjiang2 @irving2016 @dhticy 你们真有兴趣,看一下chatgpt的api收费就明白了。
过早客微信公众号:guozaoke • 过早客新浪微博:@过早客 • 广告投放合作微信:fullygroup50 鄂ICP备2021016276号-2 • 鄂公网安备42018502001446号