WMeng1

Results 7 comments of WMeng1

> > 我用bert+crf在tf2.2和tf1.14上做过测试。 > > tf1.14版本模型在tf serving上慢了1倍,tf2.2的慢了3倍。 > > 原因不太好分析,但感觉用原生tf1重构一下模型,然后把参数迁移过来应该可以解决。 > > 请问tf1.14是怎么把模型存为pb格式的? tf1.15的tf.keras有内置的保存.pb的方法;我部署的模型在跑批处理的时候推理速度奇慢,看了资源管理发现容器占用的CPU和内存都很低,CPU在10%几,内存占用1G,请问有大神遇到过这种问题么

可能是我描述的有点歧义了,大概就是说,现在有n个相同领域内的数据集,但是每个数据集指定的输出有所不同,拿实体识别举例,比如第一个数据集共包含3类实体,实体1,实体2,实体3,第二个数据集包含5类实体,除了实体1,2,3之外还有实体4和实体5,第三个数据集中的实体又包含三类实体,实体2,实体3,实体4;也就是各自的输出不同但是同属一个领域,这种场景适合用多任务学习么? 第二个问题是:如果可以的话,bert4keras怎么处理这类问题呢,我尝试了一下 `yield [batch_token_ids,batch_token_ids],[batch_ner_labels1,batch_ner_labels2] ` 也就是一条样本数据如果同时有两个任务的标签形式做多任务学习是可以的,但是如果每类数据集只包含自己任务的标签要怎么处理呢,也就是 ``` [batch_token_ids1,batch_token_ids1],batch_ner_labels1, [batch_token_ids2,batch_token_ids2],batch_ner_labels2 ``` 想要融合进一起学习要如何调整我的训练方式呢 > 第一组指的是第一个batch,还是batch内的第一个样本?

@Chrisma-98 同样遇到这个问题想请问一下 model = build_transformer_model(config_path, checkpoint_path, model='albert') category = Input(shape=(1,), name='feature_input') categoryEmbedding = Embedding(1, 312)(category) categoryEmbedding = Flatten()(categoryEmbedding) // 特征拼接 input = model.input input.append(category) output = concatenate([model.output, model.input[2]]) output =...

> > **其他的POD都可以启动,相关数据库的katib-db-manager,和katib-mysql会有错误产生,查询log如下:** > > > > * katib-db-manager: > > > > E0827 03:18:05.755835 1 mysql.go:78] Ping to Katib db failed: dial tcp 10.96.67.181:3306: connect: connection refused > >...

PVC处于pending状态,我刚才这样重新部署了一下这个yaml文件 kubectl delete -f "/opt/wangm/kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml" kubectl apply -f "/opt/wangm/kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml" 但是这几个POD仍然起不了,包括之前我也是delete,start了很多次集群,但是一直这两个节点都是起不来的,不知道我的操作哪里出现了问题,还是没能把问题解决掉,感谢大佬回复

> > kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml > > 我的现在解决了,直接删了创建 > kubectl delete -f kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml > kubectl apply -f kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml 我这里删了创建之后,pvc都bound上了,但是连接数据库的两个Pod虽然为running状态,但是ready显示0/1,describe显示还是没有连通数据库

> > > > > kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml > > > > > > > > > > > > 我的现在解决了,直接删了创建 > > > > kubectl delete -f kubeflow-manifests/manifest1.3/019-katib-installs-katib-with-kubeflow-cert-manager.yaml > > >...