首页
沸点
课程
数据标注
HOT
AI Coding
更多
直播
活动
APP
插件
直播
活动
APP
插件
搜索历史
清空
创作者中心
写文章
发沸点
写笔记
写代码
草稿箱
创作灵感
查看更多
登录
注册
lvzi
掘友等级
获得徽章 8
动态
文章
专栏
沸点
收藏集
关注
作品
赞
46
文章 44
沸点 2
赞
46
返回
|
搜索文章
最新
热门
fastapi打开docs白屏
问题来源 国内墙了cdn.jsdelivr.net,导致fastapi下载swagger-ui-bundle.js失败 解决办法 去源码里替换掉下载js的地址 例如替换成字节的地址: 可用镜像可参考
【ahocorasick】最长匹配失效
问题 使用2.0.0版本的pyahocorasick最长匹配是错误的 解决办法 这个包确实是错了,issue里也有人提出来了但是没改。 解决方法是退回正确的版本,使用1.4.4版本
中文繁简转换包对比
繁简转换 包 原理 效果 hanziconv 字对照表 古今通用的字会转换,如著->着 zhconv 字对照表+词对照表 比hanziconv好例:"住著":->"住着","住著作": "住著作",
【datasets】问题
以如下结构存储的数据 当json_data足够大的时候,Dataset.from_pandas(df)会报错,需要拆分成多个部分构建 这里改为直接从json构建也不可以 上面结构存储的数据,读取后,会
datasets包各种存储数据集方式的优缺点
save_to_disk: 简单粗暴,保存下来的数据集 不支持流式读取。测试42G的数据集读取需要42s to_json: 需要自己分片,否则大型数据集会保存成一个超大的json,虽然也没什么不好。支
【datasets】datasets加载多个数据集
几个格式相同的数据集,希望训练模型的时候一次全部加载 感觉是一个比较常用的功能,但并不在文档的显眼位置。 记录一下
【vscode】vscode debug python launch.json添加args不起作用
问题 为了带入参数调试python 程序,点击了ui界面右上角的debug按钮,配置了lauch.json文件。按照网上搜到的教程添加了"args": ["test"]。 但是点击ui界面的debug
【nlpertools】打工人桌面自定义生成
网上看到一些桌面壁纸,通过颜色和文字对桌面文件分区,但是都是现成的图片,无法自定义,于是写代码自己实现。
__get__实现python方法与实例的绑定
问题来源 在使用peft进行LoRA调优的过程中,看见一行代码,让人摸不着头脑 结论 这行将lambda方法绑定给实例model,方法名为state_dict,它的类型为method 通常比较直观的给
transformers直接启动与使用torch.distributed.run启动的区别
启动方法 区别 DP 直接启动使用的是DP方法 DP方法是Parameter Server,即一张卡做reducer,该卡显存高于其他卡,且需要与所有卡做通信 DDP torch.distribute
下一页
个人成就
文章被点赞
52
文章被阅读
48,091
掘力值
1,269
关注了
7
关注者
4
收藏集
0
关注标签
8
加入于
2022-07-20