semvec/pypi-packages huggingface dataset:
vines-worker-sdk 0.0.21
Vines Python 训练项目 SDK （供内部使用）
License: MIT

# Vines Python 训练项目 SDK （供内部使用）

这个项目希望解决的问题，将开发一个新的训练项目中的很多重复性工作进行统一封装：

1. 每次开一个新训练项目都需要起 HTTP Server
2. 里面有可能会用到很多通用能力，比如上传、下载文件、以及一些基础方法等，这些都应该封装好。
3. 错误日志推送逻辑
4. 运行时日志逻辑
5. api 入参、出参统一格式封装
6. 统一的日志格式、日志收集

## 安装

```shell
pip install vines-worker-sdk
```

## 使用示例

### 作为 conductor 客户端

详情见 `exampels/example_conductor.py` 文件中的内容。

### 使用 flask http server

从 `lib.server` 引入 `create_server` 方法，初始化 flask app，参数：

- sentry_dsn: sentry dsn, 如果配置，会自动收集异常推送到 sentry
- log_redis_queue_url: 如果配置，在调用 request.logger 方法的时候，会自动推送到消息队列，从而给前端展示。

打印日志的方法：直接使用 `request.logger` 实例的方法。

详情见 `exampels/example_server.py` 文件中的内容。