Base LLM | 从 NLP 到 LLM 的算法全栈教程 - 学习笔记

Base LLM | 从 NLP 到 LLM 的算法全栈教程 - 学习笔记课程强调为本项目创建独立的 base llm 环境 conda create n base llm python 3 10 conda activate base llm pip install numpy pandas matplotlib scikit learn jupyter CPU 版本 pip install torch torchvision torchaudio

大家好,我是讯享网,很高兴认识大家。这里提供最前沿的Ai技术和互联网信息。




课程强调为本项目创建独立的 base-llm 环境:

conda create -n base-llm python=3.10 conda activate base-llm

pip install numpy pandas matplotlib scikit-learn jupyter
# CPU 版本 pip install torch torchvision torchaudio --index-url https://download.pytorch.org/whl/cpu # GPU 版本需先查看 CUDA 版本(nvidia-smi),再选择对应 PyTorch 版本

import jieba text = "我在梦里收到清华大学录取通知书" seg_list = jieba.lcut(text, cut_all=False) # 精确模式 print(seg_list) # 输出:['我', '在', '梦里', '收到', '清华大学', '录取', '通知书']
jieba.load_userdict("./user_dict.txt")

"我" -> [1, 0, 0, 0, 0, 0] "先" -> [0, 1, 0, 0, 0, 0] ...





    小讯
    上一篇 2026-04-19 11:01
    下一篇 2026-04-19 10:59

    相关推荐

    版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
    如需转载请保留出处:https://51itzy.com/kjqy/266234.html