跳转至内容
  • 最新
  • 版块
  • 标签
  • 热门
  • 用户
  • 群组
  • 太微中文教程
  • 新插件投票看板
皮肤
  • Light
  • Cerulean
  • Cosmo
  • Flatly
  • Journal
  • Litera
  • Lumen
  • Lux
  • Materia
  • Minty
  • Morph
  • Pulse
  • Sandstone
  • Simplex
  • Sketchy
  • Spacelab
  • United
  • Yeti
  • Zephyr
  • Dark
  • Cyborg
  • Darkly
  • Quartz
  • Slate
  • Solar
  • Superhero
  • Vapor

  • 默认(不使用皮肤)
  • 不使用皮肤
折叠
太微中文论坛icon

太微中文论坛

  1. 首页信息流
  2. 版块
  3. 讨论
  4. 太记AI现在支持加载中文模型了

太记AI现在支持加载中文模型了

已定时 已固定 已锁定 已移动 讨论
插件ai
4 帖子 3 发布者 156 浏览
  • 从旧到新
  • 从新到旧
  • 最多赞同
登录后回复
此主题已被删除。只有拥有主题管理权限的用户可以查看。
  • linonetwoL 离线
    linonetwoL 离线
    linonetwo
    写于 最后由 linonetwo 编辑
    #1

    https://github.com/tiddly-gittly/TidGi-Desktop/releases/tag/v0.9.4-prerelease4 可以下载 https://hf-mirror.com/Qwen/Qwen1.5-32B-Chat-GGUF/tree/main 通义千问等中文模型的 GGUF 版本,选择较小的模型版本。

    然后放到模型文件夹里,重命名为 llama.gguf 即可(或将设置里的 llama.gguf 改为你的模型的名字也行)。

    下面这个截图是太记的设置(不是太微的设置),通过左下角哪个齿轮图标打开的。

    fb85d529-fb8f-423e-9237-4ffa60adbd4a-图片.png

    可以点击「加载模型」尝试加载看看模型能不能用。

    平时使用时不需要手动加载模型。在侧边栏的「太记语言模型」标签页里,直接和模型对话,就会自动开始加载了:

    4acac0f2-324c-40be-8cd3-cf21a79c8594-图片.png

    加载一段时间后,就会开始生成,再等一段时间,就会看到它说的话了:

    37973c89-ae61-4e63-bb49-df3b156e0ded-图片.png

    a4d2c505-9ee8-4bd8-9b35-33fe5a34f053-图片.png

    目前效果还不是特别好,可能是系统提示词的问题?你可以在太微设置(注意不是太记设置)里,自行调整默认的系统提示词:

    4025a76c-f14b-48ee-9ba4-8fa57ad235f2-图片.png

    1 条回复 最后回复
    0
    • HydrowoodH 离线
      HydrowoodH 离线
      Hydrowood
      写于 最后由 编辑
      #2

      目前有 GGUF 版本的中文小型模型,你在用哪个?有没有对比推荐

      马萨伊尔马 1 条回复 最后回复
      0
      • 马萨伊尔马 离线
        马萨伊尔马 离线
        马萨伊尔
        在 中回复了 Hydrowood 最后由 马萨伊尔 编辑
        #3

        @Hydrowood gtx1060显卡 只能玩7b的gguf。更高的我不知道。

        1 条回复 最后回复
        0
        • linonetwoL 离线
          linonetwoL 离线
          linonetwo
          写于 最后由 编辑
          #4

          最近没玩,据说插件还有bug。这个就是图一乐,日常还是用 GPT4 和 Github copilot Chat。

          1 条回复 最后回复
          0

          • 登录

          • 没有帐号? 注册

          • 登录或注册以进行搜索。
          Powered by NodeBB Contributors
          • 第一个帖子
            最后一个帖子
          0
          • 最新
          • 版块
          • 标签
          • 热门
          • 用户
          • 群组
          • 太微中文教程
          • 新插件投票看板