tensorflow-serving 相关问题

TensorFlow Serving是一种灵活的高性能服务系统,适用于机器学习模型,专为生产环境而设计。 TensorFlow服务可以轻松部署新算法和实验,同时保持相同的服务器架构和API。 TensorFlow Serving提供与TensorFlow模型的开箱即用集成,但可以轻松扩展以提供其他类型的模型和数据。

TensorRTTensorflow2.0转换在__saved_model_init_op上失败。

我希望将我的模型转换为tensorrt优化模型为tensorflow服务,但是我得到了以下错误,我如何能固定这个?得到了一个包含非Tensor值的字典None的键......

回答 1 投票 1

如何在Google Clound AI平台中用Base64服务Tensorflow2图像分割模型。

我通过下面的代码成功地将一个TF2图像分割模型保存并部署到AI平台。@tf.function(input_signature=[tf.TensorSpec(shape=(None), dtype=tf.string)]) def ...

回答 1 投票 0

{ "error": "Malformed request. POST v1modelstext_model POST v1modelstext_model" }。Tensorflow服务

我正在使用Colab进行文本分类,它是多标签文本分类模型导入json # inputFeature1 inputFeature1="¿Tiene el arte que gustar a todos? Pues no" #inputFeature2 ...

回答 1 投票 0

如何用docker运行包括其模型在内的tensorflow-serving?

问题是,我想用docker运行包括模型在内的tensorflow-serving,但似乎docker会使tensorflow-serving无法加载文件夹。在容器本身,它可以加载...

回答 1 投票 1

TF2 Keras - 通过Tensorflow Serving在Keras保存的模型中进行特征工程设计。

Tensorflow 2关于在Keras模型上进行特征工程预处理的文档似乎很混乱,而且不是很友好。目前我有一个简单的Keras N层模型,TF ...

回答 1 投票 0

当另一个循环正在运行时,不能运行事件循环。

RuntimeError: 无法在另一个循环运行时运行事件循环,试图在我的本地设置tensorflow_federated。所有的导入版本都是正确的,CUDA = 10.1, python = 3.6.9, tensorflow_federated。CUDA = 10.1, python = 3.6.9, tensorflow = 2...。

回答 1 投票 0

导出Keras LSTM,没有用于Tensorflow / serving的Dropout层

我注意到,当使用tensorflow / serving docker容器部署Keras LSTM模型时,对model:predict的调用将为相同的输入返回不一致的值。经过一番研究,似乎...

回答 1 投票 0

TF2 Keras-通过Tensorflow服务在Keras保存的模型中进行特征工程

用于Keras模型的预处理/特征工程的Tensorflow 2文档似乎很混乱,也不是很友好。目前,我有一个简单的Keras N层模型,带TF ...

回答 1 投票 0

Java Tensorflow + Keras等效于model.predict()

在python中,您可以简单地将numpy数组传递给predict(),以从模型中获取预测。 Java与SavedModelBundle一起使用的等效条件是什么? Python模型= tf.keras.models.Sequential([#...

回答 1 投票 0

TensorFlow服务“回归”方法REST API

我在TensorFlow服务服务器上使用“回归” API时遇到麻烦。请参阅下面的要点链接以更舒适地阅读。 https://gist.github.com/krikit/32c918cc03b52315ade562267a91fa6b我做了一个简单的...

回答 1 投票 1

session.run()对于相同的输入给出不同的结果

我正在加载一个tensorflow保存的模型,并尝试推断已加载的模型。它以灰度图像作为输入,并输出相同大小的灰度图像。导入tensorflow为tf导入numpy为np从...

回答 1 投票 0

conv_layer名称未定义

[当我在tensorflow中运行代码时,出现一个错误,名称为“ conv_layer name not defined”。我是新手,这是我的jupyter笔记本!

回答 1 投票 -4

tensorflow服务REST API错误:找不到可服务模型的基本路径/ models / model

我是tensorflow服务和docker的新手,我经历了多个教程,并希望在经过重新训练的模型上进行尝试。当我运行以下代码时,出现以下错误:找不到基...

回答 1 投票 0

tensorflow_model_server:错误“填充的第一维必须是输入[4,2]的等级...”]]

我正在使用tensorflow_model_server提供SavedModel。我不断收到此响应代码400和以下错误:{“ error”:“填充的第一维必须是输入的等级[4,2] [1,1,1,...

回答 1 投票 0

Tensorflow-Serving:requests.exceptions.HTTPError:400 Client

我已经为我的自定义模型提供了基于预先训练模型的手机对象检测API。因此,我想向服务发送请求:http:// localhost:8501 / v1 / models / cellphone:predict The ...

回答 1 投票 0

通过C API访问tensorflow 2.0 SavedModel的输入和输出张量

我无法从tensorflow 2.0 SavedModel加载C_API来运行推理,因为我无法按名称访问输入和输出操作。我通过...

回答 1 投票 2

TFX同时运行多台教练机

我是tfx 的新手,正在学习将管道整合在一起。我已经在GCP的Kubeflow中成功建立了一个管道。我想知道我该如何运行多台教练机,这些教练机会产生不同的输出/ ...

回答 1 投票 0

Popen之后的杀死进程及其所有子进程

因此,我有一个Flask端点A,端点B和另外两个脚本foo.py和bar.py。当我调用端点A时,我将使用Popen调用foo.py并存储其PID。在foo.py上,...

回答 1 投票 0

在tf_serving泊坞窗中,“ direct_session_runs”和“ graph_runs”有什么区别

我正在尝试使用张量流服务的docker日志在splunk中创建一些仪表板。对于每个不确定其区别或含义的事件,它都会返回两个指标,即“ direct_session_runs” ...

回答 1 投票 1


© www.soinside.com 2019 - 2024. All rights reserved.