当前位置: 首页 > news >正文

青岛公路建设集团有限公司网站网站查询ip地址查询

青岛公路建设集团有限公司网站,网站查询ip地址查询,东莞大岭山核酸检测点,泉州企业建站模板目录 让其他电脑可访问本地ollama 流式响应 让其他电脑可访问本地ollama 默认情况下,其他电脑不能直接访问本地 Ollama 服务。 解决方法:让 Ollama 监听局域网地址,而不是 localhost 我们可以让 Ollama 监听局域网 IP,在 Oll…

目录

让其他电脑可访问本地ollama

流式响应


让其他电脑可访问本地ollama

默认情况下,其他电脑不能直接访问本地 Ollama 服务。

解决方法:让 Ollama 监听局域网地址,而不是 localhost

我们可以让 Ollama 监听局域网 IP,在 Ollama 服务器上运行:

set OLLAMA_HOST=0.0.0.0:11434
ollama serve

注意:这种方式只对当前 CMD 窗口有效,关闭窗口后就会失效。

如果你希望 每次打开 CMD 或 PowerShell 都能自动使用该设置,可以永久设置环境变量

在 CMD (以管理员身份打开)里运行:

setx OLLAMA_HOST "0.0.0.0:11434" /M

然后重新启动 CMD 并运行:

ollama serve

这样 Ollama 就会监听 0.0.0.0,让局域网的其他设备访问了。

可以运行以下命令检查:

echo %OLLAMA_HOST%

如果输出 0.0.0.0:11434,说明已经成功设置。

流式响应

下面是一个流式响应的测试案例。其中的your_ip改为部署ollama的电脑的局域网ip。局域网ip可通过命令ipconfig查询,yuanshenQA32是我的ollama下载的模型。

import okhttp3.*;
import java.io.BufferedReader;
import java.io.IOException;
import java.io.InputStreamReader;
import java.util.concurrent.TimeUnit;public class OllamaApiClient {private static final String API_URL = "http://your_ip:11434/api/generate";private static final MediaType JSON = MediaType.parse("application/json; charset=utf-8");private final OkHttpClient client = new OkHttpClient.Builder().readTimeout(0, TimeUnit.SECONDS) // 允许流式响应不超时.build();public void generateTextStream(String model, String prompt) {String jsonBody = "{\"model\": \"" + model + "\", \"prompt\": \"" + prompt + "\", \"stream\": true}";RequestBody body = RequestBody.create(jsonBody, JSON);Request request = new Request.Builder().url(API_URL).post(body).build();client.newCall(request).enqueue(new Callback() {@Overridepublic void onFailure(Call call, IOException e) {System.err.println("请求失败:" + e.getMessage());}@Overridepublic void onResponse(Call call, Response response) {if (!response.isSuccessful()) {System.err.println("响应错误:" + response);return;}try (BufferedReader reader = new BufferedReader(new InputStreamReader(response.body().byteStream()))) {String line;while ((line = reader.readLine()) != null) {System.out.println(line); // 实时打印返回内容}} catch (IOException e) {System.err.println("读取流失败:" + e.getMessage());}}});}public static void main(String[] args) {OllamaApiClient client = new OllamaApiClient();client.generateTextStream("yuanshenQA32:latest", "已知一个数 x,满足以下等式:3(x+2)−2(x−1)=4x+5。请解出 x 的值");}
}

运行后,打开控制台,可以观察到控制台会不断打印响应内容:

http://www.cadmedia.cn/news/3712.html

相关文章:

  • 手机中国网官网百度关键词优化专家
  • 免费设计商标的网站湖南seo优化服务
  • 建站群赚钱有前途吗泰州网站优化公司
  • 制作企业网站的基本步骤网络搭建教程
  • 聊城手机网站建设方案今日新闻大事件
  • 通讯设备 技术支持 东莞网站建设seosem是指什么意思
  • 网站改版不换域名怎么做给公司建网站需要多少钱
  • 有没有做租赁的网站网站如何添加友情链接
  • 外贸公司网站建设 重点是什么指数分布
  • 做dj选歌是哪个网站国际最新十大新闻事件
  • 网站正在建设中单页线下推广公司
  • led高端网站建设大连百度关键词优化
  • 昆明网站设计方案优化网站打开速度
  • 装b神器在线制作sem优化是什么意思
  • 建设网站怎样挣钱自媒体营销的策略和方法
  • web开发是做网站怎么制作一个网站5个网页
  • 网站开发功能清单网站关键词优化方法
  • 鞍山网站制作的网站合肥网站优化公司
  • 重庆网站排名优化公司网站制作多少钱一个
  • 九江网站推广徽hyhyk1怎么开网店
  • 品牌网站设计制作哪家正规成都网站建设
  • 网站设计制作新报价丈哥seo博客工具
  • app运营推广策划方案关键词优化排名软件哪家好
  • 崇礼做网站的公司页面优化的方法有哪些
  • 方又圆网站建设单页面网站如何优化
  • 如何制作漂亮的微信公众号文章seo关键词优化价格
  • 高端网站开发建设杭州seo公司
  • 海口房地产网站建设班级优化大师怎么加入班级
  • 北京网站优化快速排名seo sem推广
  • wordpress 热门文章搜索seo优化