使用Flask应用框架在Centos7.8系统上部署机器学习模型
liebian365 2025-03-12 16:30 3 浏览 0 评论
安装centos7.8 虚拟环境
1、镜像链接
centos-vault-centos-7.8.2003-isos-x86_64安装包下载_开源镜像站-阿里云
具体安装步骤不再赘述
2、授予普通用户 sudo 权限
su 切换到管理员
cd 到 /etc目录下,执行 gedit sudoers
加入 username ALL=(ALL) ALL 这里username是要授予sudo权限的用户名。
sudo whoami
验证
3、换阿里源
(1)备份
mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup
(2)换源
curl -o /etc/yum.repos.d/CentOS-Base.repo https://mirrors.aliyun.com/repo/Centos-7.repo
运行 yum makecache,更新源
4、系统更新到最新(大概10分钟左右)
sudo yum update -y
创建项目文件夹
Home 下 创建新文件夹 myAPIProgram 用于存放部署项目,centos7.8桌面版右击创建即可
安装 Python 和其他依赖
1、安装 Python 3.8(或更高版本)
sudo yum install -y epel-release
sudo yum install centos-release-scl
修改为国内源
cd 到 /etc/yum.repos.d 目录下
# 备份
cp CentOS-SCLo-scl.repo{,.bak}
cp CentOS-SCLo-scl-rh.repo{,.bak}
编辑
sudo gedit CentOS-SCLo-scl.repo
[centos-sclo-sclo]
name=CentOS-7 - SCLo sclo
baseurl=https://mirrors.aliyun.com/centos/7/sclo/x86_64/sclo/
gpgcheck=0
enabled=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-SIG-SCLo
sudo gedit CentOS-SCLo-scl-rh.repo
[centos-sclo-rh]
name=CentOS-7 - SCLo rh
baseurl=https://mirrors.aliyun.com/centos/7/sclo/x86_64/rh/
gpgcheck=0
enabled=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-SIG-SCLo
刷新缓存
yum repolist && yum clean all && yum makecache
安装python3.8
sudo yum install rh-python38
建立软链接
sudo ln -s /opt/rh/rh-python38/root/usr/bin/python3 /usr/bin/python3
sudo ln -s /opt/rh/rh-python38/root/usr/bin/pip3 /usr/bin/pip3
查看
python3 -V
环境配置
1、创建一个新的虚拟环境
(1)cd 到新建目录中
设置文件夹权限:
sudo chmod 777 -R myAPIProgram
(2)创建一个新的虚拟环境以隔离项目依赖:
python3 -m venv api_venv01
# 激活
source api_venv01/bin/activate
2、安装Flask以及其他必要的包
pip3 install flask numpy pandas scikit-learn gunicorn
Gunicorn是一个Python WSGI HTTP服务器,专门用于部署Python Web应用程序,如Flask和Django。它通过使用预先分叉工作进程的模型来实现高效的并发处理,非常适合用于生产环境。
训练一个简单的模型
1、在vscode里面训练并生成模型
import numpy as np
import matplotlib.pyplot as plt
from sklearn.model_selection import train_test_split
from sklearn.linear_model import LinearRegression
from sklearn.metrics import mean_squared_error, mean_absolute_error, r2_score
# 显示中文字体
plt.rcParams['font.sans-serif'] = ['SimHei'] # 用来正常显示中文标签
plt.rcParams['axes.unicode_minus'] = False # 用来正常显示负号
# 生成x值
np.random.seed(0) # 为了可复现性
x = 2 * np.random.rand(100, 1) # 生成100个0到2之间的随机数
# 根据线性关系y = 3x + 2生成y值,并加入噪声
y = 3 * x + 2 + 0.2*np.random.randn(100, 1)
# 将x和y转换为二维数组,因为scikit-learn要求输入为二维数组
x_train, x_test, y_train, y_test = train_test_split(x, y, test_size=0.2, random_state=42)
# 创建线性回归模型实例
model = LinearRegression()
# 使用训练数据训练模型
model.fit(x_train, y_train)
# 预测测试集的结果
y_pred = model.predict(x_test)
# 计算MAE
mae = mean_absolute_error(y_test, y_pred)
# 计算并打印均方误差
mse = mean_squared_error(y_test, y_pred)
# 计算 R2
r2 = r2_score(y_test, y_pred)
print("MAE:", mae)
print("MSE:", mse)
print("R2:", r2)
print("模型系数:", model.coef_)
print("模型截距:", model.intercept_)
print("模型方程: y =", model.coef_[0][0], "* x +", model.intercept_[0])
# 可视化结果
plt.scatter(x_test, y_test, color='black', label='实际值')
plt.plot(x_test, y_pred, color='blue', linewidth=3, label='预测值')
plt.xlabel('X')
plt.ylabel('Y')
plt.title('线性回归模型预测')
plt.legend()
plt.show()
结果
MAE: 0.16029109668506641
MSE: 0.036710129878857196
R2: 0.9809551843591459
模型系数: [[2.99805182]]
模型截距: [2.04126804]
模型方程: y = 2.9980518202009767 * x + 2.0412680377422876
2、借助 joblib 保存模型
from joblib import dump, load
模型训练好之后
# 保存模型
dump(model, 'my_models/my_model.joblib')
# 加载模型
loaded_model = load('my_models/my_model.joblib')
使用加载的模型预测结果如下
构建Flask 应用
1、回到centos系统
cd 到先前创建好的目录 api_venv01 中
2、创建一个简单的 Flask 应用来加载模型并提供预测服务 app.py 文件
sudo touch app.py
编辑文件
sudo gedit app.py
# app.py
from flask import Flask, request, jsonify
from werkzeug.exceptions import BadRequest
import joblib
import pandas as pd
import numpy as np
app = Flask(__name__)
# 加载模型
model = joblib.load('my_models/my_model.joblib')
@app.route('/predict', methods=['POST'])
def predict():
try:
# 获取JSON数据
input_data = request.get_json()
#获取并验证输入数据
# 预处理数据
# 转换为DataFrame
pd_features = pd.DataFrame(input_data, index=[0])
# 预测
prediction = model.predict(pd_features)
# 返回预测结果
return jsonify({'code':200, 'prediction': prediction.tolist()})
except BadRequest as e:
abort(400, description=str(e))
except Exception as e:
abort(500, description="服务器内部错误: " + str(e))
if __name__ == '__main__':
app.run(host='0.0.0.0', port=5000, debug=False)
3、打开防火墙
sudo firewall-cmd --permanent --add-port=5000/tcp
sudo firewall-cmd --reload
4、启动服务
主要命令
gunicorn -w 4 app:app
gunicorn -w <工作进程数> <模块名>:<应用实例名>,其中,<工作进程数>是你希望Gunicorn创建的工作进程数量,<模块名>是你的Flask应用所在的Python文件名(不包括.py后缀),<应用实例名>是你的Flask应用实例的名称。
(1)获取centos系统的ip地址
ip address
(2)更改监听地址
创建 gunicorn_config.py 文件,写入:
# gunicorn_config.py
bind = '192.168.40.134:8000'
workers = 4
(3)启动服务
gunicorn -c gunicorn_config.py app:app
5、apiPost访问
(1)我的访问地址为:
http://192.168.40.134:8000/predict,访问方式:post
(2)body 数据
[
1.38494424,
0.20408962,
1.95291893,
1.34127574,
1.33353343,
1.3636406 ,
0.92295872,
0.63596636
]
以上是完成了简要的部署,不包括打印日志、设置守护进程-重启自动启动,app.py中缺少数据校验
其他
每次启动都要激活虚拟环境,再运行,不利于调试,写一个shell脚本集合一起
sudo touch run.sh
sudo gedit run.sh
写入:
source api_venv01/bin/activate
gunicorn -c gunicorn_config.py app:app
授予执行权限:
chmod +x run.sh
./run.sh 直接执行
完成环境激活+运行app。
- 上一篇:shell编程
- 下一篇:Linux/Shell:排名第四的计算机关键技能
相关推荐
- 月薪 4K 到 4W 的运维工程师都经历了什么?
-
运维工程师在前期是一个很苦逼的工作,在这期间可能干着修电脑、掐网线、搬机器的活,显得没地位!时间也很碎片化,各种零碎的琐事围绕着你,很难体现个人价值,渐渐的对行业很迷茫,觉得没什么发展前途。这些枯燥无...
- 计算机专业必须掌握的脚本开发语言—shell
-
提起Shell脚本很多都有了解,因为无论是windows的Dom命令行还是Linux的bash都是它的表现形式,但是很多人不知道它还有一门脚本编程语言,就是ShellScript,我们提起的Shel...
- Linux/Shell:排名第四的计算机关键技能
-
除了编程语言之外,要想找一份计算机相关的工作,还需要很多其他方面的技能。最近,来自美国求职公司Indeed的一份报告显示:在全美工作技能需求中,Linux/Shell技能仅次于SQL、Java、P...
- 使用Flask应用框架在Centos7.8系统上部署机器学习模型
-
安装centos7.8虚拟环境1、镜像链接...
- shell编程
-
简介:Shell是一个用C语言编写的程序,它是用户使用Linux的桥梁。Shell既是一种命令语言,又是一种程序设计语言。...
- 14天shell脚本入门学习-第二天#脚本和参数#排版修正
-
脚本是一种包含一系列命令的文本文件,通常用于自动化任务。Shell脚本是用Shell命令编写的脚本,可以在命令行中执行。掌握脚本的基础知识和变量的使用是编写高效脚本的关键。...
- 嵌入式Linux开发教程:Linux Shell
-
本章重点介绍Linux的常用操作和命令。在介绍命令之前,先对Linux的Shell进行了简单介绍,然后按照大多数用户的使用习惯,对各种操作和相关命令进行了分类介绍。对相关命令的介绍都力求通俗易懂,都给...
- 实现SHELL中的列表和字典效果
-
大家好,我是博哥爱运维。编写代码,很多情况下我们需要有种类型来存储数据,在python中有列表和字典,golang中有切片slice和map,那么在shell中,我们能否实现列表和字典呢,答案是肯定的...
- 14天shell脚本入门学习-第二天#脚本和变量
-
脚本是一种包含一系列命令的文本文件,通常用于自动化任务。Shell脚本是用Shell命令编写的脚本,可以在命令行中执行。掌握脚本的基础知识和变量的使用是编写高效脚本的关键。...
- shell常用命令之awk用法介绍
-
一、awk介绍awk的强大之处,在于能生成强大的格式化报告。数据可以来自标准输入,一个或多个文件,或者其他命令的输出。他支持用户自定义函数和动态正则表达式等先进功能,是Linux/unix一个强大的文...
- Linux编程Shell之入门——Shell数组拼接与合并
-
在Shell中,可以使用不同的方式实现数组拼接和合并。数组拼接指将两个数组中的元素合并成一个数组,而数组合并指将两个数组逐个组合成一个新数组。以下是关于Shell数组拼接和合并的详细介绍:数...
- shell中如何逆序打印数组的内容,或者反转一个数组?
-
章节索引图首先请注意,有序的概念仅适用于索引数组,而不适用于关联数组。如果没有稀疏数组,答案会更简单,但是Bash的数组可以是稀疏的(非连续索引)。因此,我们需要引入一个额外的步骤。...
- 如何学好大数据开发?---shell基本语法
-
昨天我们初步了解到了shell的一些基本知识,比如shell的分类,常用的shell类型。今天就带来大数据开发之shell基本语法,掌握好基础才是最重要的,那接下来就开始学习shell的基本语法。一、...
- Linux编程Shell之入门——Shell关联数组
-
关联数组是Shell中一种特殊的数组类型,它使用字符串作为下标。在关联数组中,每个元素都被标识为一个唯一的字符串键值,也称为关联数组的索引。在Shell中,可以使用declare或typeset命令...
- 从编译器视角看数组和指针
-
虽然有单独的文章描述数组和指针,但二者的关系实在值得再写一篇文章。...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- wireshark怎么抓包 (75)
- qt sleep (64)
- cs1.6指令代码大全 (55)
- factory-method (60)
- sqlite3_bind_blob (52)
- hibernate update (63)
- c++ base64 (70)
- nc 命令 (52)
- wm_close (51)
- epollin (51)
- sqlca.sqlcode (57)
- lua ipairs (60)
- tv_usec (64)
- 命令行进入文件夹 (53)
- postgresql array (57)
- statfs函数 (57)
- .project文件 (54)
- lua require (56)
- for_each (67)
- c#工厂模式 (57)
- wxsqlite3 (66)
- dmesg -c (58)
- fopen参数 (53)
- tar -zxvf -c (55)
- 速递查询 (52)