sakujo
V2EX  ›  问与答

问一个大模型本地部署的问题

  •  
  •   sakujo · Jan 30, 2025 · 3429 views
    This topic created in 646 days ago, the information mentioned may be changed or developed.

    在 pc 上跑了 ollama ,想在软路由的 docker 上布置个 open-webui 供家里其他设备使用。部署好了,但是 open-webui 一直找不到模型。 我确定 ollama 的服务搭的没问题,环境变量也改了,在局域网的其他机器上都能访问到。 open-webui 的 ollama 设置里也改成了 pcip:11434,但 open-webui 就是连接不到 ollama ,有没有懂得麻烦给指导一下

    4 replies  •  2025-02-02 19:30:39 +08:00
    andy20160606
    andy20160606
    Jan 30, 2025
    1
    11434 端口 是不是没打开,把防火墙先关掉试试呢
    sakujo
    sakujo
    OP
    Jan 30, 2025
    2
    @andy20160606 #1 应该是没问题,我在局域网其他设备上访问 pcip:11434 ,都能显示 Ollama is running
    Solix
    Solix
    Jan 30, 2025 via iPhone❤️1
    3
    在不在一个网段
    me007
    me007
    Feb 2, 2025
    4
    猜测 是 跨域原因
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   767 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 23:12 · PVG 07:12 · LAX 15:12 · JFK 18:12
    ♥ Do have faith in what you're doing.