tensorflow-serving 相关问题

TensorFlow Serving是一种灵活的高性能服务系统,适用于机器学习模型,专为生产环境而设计。 TensorFlow服务可以轻松部署新算法和实验,同时保持相同的服务器架构和API。 TensorFlow Serving提供与TensorFlow模型的开箱即用集成,但可以轻松扩展以提供其他类型的模型和数据。

TensorFlow通过docker提供多种型号

我无法通过TensorFlow在Windows 10计算机上通过docker运行2个或更多模型。我创建了一个models.config文件model_config_list:{config:{name:“ukpred2”,base_path:“/ ...

回答 1 投票 2

tensorflow_serving分类,预测和回归SignatureDefs之间的区别是什么

我试图在tensorflow服务中提供tensorflow对象检测api模型,而我对3种不同的SignatureDefs感到困惑。有什么区别,何时选择一个而不是另一个?

回答 2 投票 0

如何用cuda8.0安装TensorFlow-gpu?

我试图按照官方网站上的说明安装它,导致tensorflow时导致ImportError:ImportError:libcublas.so.9.0:无法打开共享对象文件:否...

回答 2 投票 20

如何配置Tensorflow服务以从HDFS服务模型?

我正在尝试使用Tensorflow服务项目从HDFS中提供Tensorflow模型。我正在运行tensorflow服务docker容器标签1.10.1 https://hub.docker.com/r/tensorflow/serving我可以......

回答 1 投票 11

TensorFlow:如何从SavedModel预测?

我已经导出了一个SavedModel,现在我将其重新加载并进行预测。它训练有以下特征和标签:F1:FLOAT32 F2:FLOAT32 F3:FLOAT32 L1:FLOAT32所以......

回答 4 投票 9

使用Tensorflow服务提供Keras构建的Tensorflow模型时,连接层出错

尝试在tensorflow服务中调用特定模型的预测时,我遇到了一个奇怪的错误:grpc.framework.interfaces.face.face.AbortionError:AbortionError(code = StatusCode.INVALID_ARGUMENT,...

回答 1 投票 0

TF服务中的外部数据库查找或TF图的一部分

我有一个张量流模型,我打算使用张量流为模型推理进行部署。只是想知道在服务收到请求后是否有办法添加一些自定义逻辑...

回答 1 投票 0

如何让Tensorflow服务模型从传入的输入而不是本地批处理文件中获取?

我目前正试图让seq2seq模型与TF Serving一起工作。我以为我没错,但似乎我错了。我最初通过本地文本文件输入训练模型,读入为...

回答 1 投票 1

在Cloud ML中部署时,Op类型未在Tensorflow 1.4.1中注册HashTableV2

当我们将模型部署到云ml时,我们得到Bad model Op类型未注册HashTableV2代码:def model_fn(features,labels,mode):if mode == tf.estimator.ModeKeys.TRAIN:tf.keras ....

回答 2 投票 0

Tensorflow:差异get_tensor_by_name vs get_operation_by_name?

这里的答案是,一个返回一个操作,而另一个返回一个张量。从名称和文档中可以看出这一点。但是,假设我执行以下操作:logits = tf ....

回答 1 投票 3

在请求时找不到Servable:在加载旧版本的模型时

我有一个模型,让我们说mymodel和两个不同的数据集:setA,setB。在训练(在我的本地机器中)setA和setB分开后,tensorflow服务创建了两个不同的目录:100,200 ......

回答 1 投票 1

在其他语言环境中使用TensorFlow的深度学习模型[关闭]

我对TensorFlow有很多经验,我即将开始一个项目,最终将在C#生产环境中使用TensorFlow训练模型。 ...

回答 1 投票 13

tensorflow服务:feature_configs数据格式的混淆

我已经跟随了tensorflow服务教程mnist_saved_model.py并尝试训练和导出text-cnn-classifier模型管道是*嵌入层 - > cnn - > maxpool - > cnn - > ...

回答 1 投票 2

运行import_pb_to_tensorboard.py时出现_DecodeError('意外的端组标记。')

我正在尝试在android / iOS设备上部署tensorflow模型的方法。所以我做了:1)使用tf.saved_model.builder.SavedModelBuilder来获取.pb文件中的模型2)使用tf.saved_model.loader ....

回答 1 投票 0

将使用tf.estimator训练和保存的模型转换为.pb

我有一个用tf.estimator训练的模型,它在训练后导出,如下所示serving_input_fn = tf.estimator.export.build_raw_serving_input_receiver_fn(feature_placeholders)分类器....

回答 1 投票 2

如何在tensorflow服务中获取模型状态

我想在Scala(或Java)中编写一个客户端来获取tensorflow服务中的模型状态。在阅读目录中的所有proto文件后:/ serving / tensorflow_serving / apis,我认为这些......

回答 1 投票 1

恢复使用tf.estimator训练的模型并通过feed_dict输入输入

我用tf.estimator训练了一个resnet,在训练过程中保存了模型。保存的文件由.data,.index和.meta组成。我想加载这个模型并获得新的预测......

回答 2 投票 3

DNNClassifier模型到TensorFlow服务模型

我是ML和TF的新手,我正在尝试使用TensorFlow服务在GCP上托管原始的TensorFlow模型。为此,我需要将DNNClassifier模型转换为TensorFlow服务模型。根据 ...

回答 2 投票 1

使用tf.Estimators的Tensorflow服务函数在从java调用时会导致错误

我已成功创建模型,并希望将其导出以用于从Java客户端进行预测,但在使用java中的预测存根调用预测时,它会出错,因为我需要...

回答 1 投票 0

如何通过标准张量流服务泊坞窗图像提供多个版本的模型?

我是Tensorflow服务的新手,我刚尝试使用本教程通过docker服务的Tensorflow并成功完成。但是,当我尝试使用多个版本时,它只提供最新版本。是吗 ...

回答 2 投票 2

© www.soinside.com 2019 - 2024. All rights reserved.