170 похожих чатов

Всем добрый день! Кто-нибудь знает способ запустить multilingual USE (который

лежит на tensorflow hub, например) на pytorch? Поиск в гугле не дал желаемого результата ;(

22 ответов

27 просмотров

Нет такого варианта. (так как там не только модель зашита, но и токенайзер) Есть вариант использовать sentence-transformers

А можешь дать ссылку?

Rodion-Proskuryakov Автор вопроса
Al.exe
А можешь дать ссылку?

На что именно? На саму модель?

Rodion-Proskuryakov Автор вопроса
Al.exe
Да на тф хабе

https://tfhub.dev/google/universal-sentence-encoder-multilingual/3

Rodion-Proskuryakov Автор вопроса
Rodion-Proskuryakov Автор вопроса

Не, мне нужно как вход для другой модели, считать эмбеддинги на лету

Alexander Fedorenko
ну не собирайте корпус, а делайте по одному

UPD хотя по обрывкам, я скорее не совсем верно, не в полном объеме понимаю вашу проблему

Rodion-Proskuryakov Автор вопроса
Alexander Fedorenko
UPD хотя по обрывкам, я скорее не совсем верно, не...

Мне нужно использовать USE в онлайн-режиме в веб-сервисе, считая эмбеддинги по запросу. При этом хочется запустить это дело на торче вместо tf

Rodion Proskuryakov
Мне нужно использовать USE в онлайн-режиме в веб-с...

Возьмите аналогичную модель из библиотеки sentence-transformers

сравнивал для поиска на одних и тех же наборах SBERT и MUSE - MUSE показывал гораздо круче результат Хоть и перебирал модели для SBERT, точность поиска MUSE была выше

Alexander Fedorenko
сравнивал для поиска на одних и тех же наборах SB...

не исключаю, что есть наборы, на который результат может быть обратным но у меня таких наборов не было

Rodion-Proskuryakov Автор вопроса

Вы же не знаете мои вводные целиком, MUSE и USE - совершенно разные модели

Rodion Proskuryakov
Вы же не знаете мои вводные целиком, MUSE и USE - ...

вы спрашивали о multilingual USE, вот я о нем вам и ответил

Rodion-Proskuryakov Автор вопроса

Хорошо, но я так и не понял, где мне взять реализацию для торча, в этом был вопрос

Rodion Proskuryakov
Хорошо, но я так и не понял, где мне взять реализа...

Третий раз вам сообщаю - такой реализации нет. Никому нет желания (необходимости) портировать sentencepiece токенайзер из USE.

А альтернативы не рассматриваете?

Rodion-Proskuryakov Автор вопроса
Al.exe
А альтернативы не рассматриваете?

Нет, к сожалению, это вопрос требований к системе

Похожие вопросы

Обсуждают сегодня

#include <stdio.h> #include <stdlib.h> #include <time.h> void mass_first_generate(int mass[5][7]) {     for (int N = 0; N < 5; N++) {         for (int A = 0; A < 7; A++) {   ...
Чувак
6
Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
Всем привет! Решаю 99 OCaml Problems и столкнулся со следующей проблемой (прошу палками не забивать, я OCaml практически не трогал до этого момента): open OUnit2 let create_...
К|/|pи/\/\ 6е3yглbIи
2
https://www.linkedin.com/posts/ugama-benedicta-kelechi-codergirl-103041300_mobiledevelopment-fluttertraining-handsonlearning-activity-7263445699227254784-IdHB?utm_source=share...
CoderGirl
16
возможно ли как-то передать в электрон или таури медиа поток с рендера 2д движка? двиг запускается как dll, а дальше надо как-то отправлять рендер кодировать не подходит, зр...
Kyle Nekto
7
Ну вот просто даже давайте вот как. Какой нибудь конкретный кейс, можете в пример привести, где бч работает и приносит прикладную пользу, а не просто что бы было? Не крипту.
Alexander Andreev
22
Помогите пожалуйста. Делаю систему плагинов. Проблема сейчас в такая: плагины загружаются в основном потоке. FLibHandle := SafeLoadLibrary(FFileName) Но нужно еще выполнить фу...
Илья 🤣
10
объясните пожалуйста, почему функция не работает должным образом? вроде должно брать активное окно сравнивать его размер с размером экрана, и если есть совпадение = true прове...
JF
12
лучше скажите, причём тут паскаль?
Alexey Kulakov
36
Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
13
Карта сайта