2024-01-06

    python 创建代理池

    爬虫程序是批量获取互联网上的信息的重要工具,在访问目标网站时需要频繁发送请求,为了避免被目标网站封禁 IP 地址,我们需要使用代理 IP 来代替自己的 IP 地址进行访问。此时,就需要用到代理池。

    1 代理 IP & 代理池

    ...

    Read More
    2024-01-06

    在 Linux 安装 stable diffusion

    由于工作站安装的是 ubuntu,卡也在上面,就只能在 ubuntu 上部署安装 stable diffusion 了。另外,Linux 上使用 stable diffusion 也会方便很多。

    1 准备...

    Read More
    2024-01-06

    修改和调试 onnx 模型

    1. onnx 底层实现原理

    1.1 onnx 的存储格式

    ONNX 在底层是用 Protobuf 定义的。Protobuf,全称 Protocol Buffer...

    Read More
    2024-01-05

    借助 github 仓库来作为 gitpages 博客图床

    在平时写文档的时候,尤其是在类似Markdown这种纯文本的文档中,使用图片常常很麻烦。

    如果使用网络上的图片,可能出现以后链接不可用的状况;或者把图片上传到网络上再使用图片链接,往往图片链接千奇百怪,并且图片分散在网络上...

    Read More
    2024-01-03

    在 pytorch 中支持更多的 onnx 算子

    将 pytorch model 转换成 onnx model,需要满足:

    • 算子在 PyTorch 中有实现
    • 有把该 PyTorch 算子映射成一个或多个 ONNX 算子的方法
    • ONNX...
    Read More
    2024-01-02

    pytorch 转 onnx

    ONNX 是目前模型部署中最重要的中间表示之一,在把 PyTorch 模型转换成 ONNX 模型时,使用的 torch 接口是 torch.onnx.export 这里记录了 pyto...

    Read More
    2023-12-29

    build blog with gitpages

    1 介绍

    博客整体效果。在线预览我的博客:https://taot-chen.github.io

    2023-12-28

    预训练模型下载和使用

    1 huggingface

    Huggingface是一家公司,在Google发布BERT模型不久之后,这家公司推出了BERT的pytorch实现,形成一个开源库pytorch-pretrained-bert。后续又实现了其他的预训练模型,如GPT、GPT2、...

    Read More