Tanto quanto sei, não há uma palavra oficial sobre isso, mas acho que não precisamos de confirmação oficial para concluir que sim, ele estava tentando envenená-la.
No episódio Inside the Episode, Weiss diz o seguinte, que sugere uma tentativa de envenenamento, de que outra forma ele a "derrubaria" sem um exército? É claro que pode-se argumentar que ele está falando sobre Varys ter conversas secretas com Jon e enviar as cartas, mas há mais do que isso.
D.B. Weiss: I think Varys knew that it was unlikely that he would survive the attempt to overthrow Dany in favour of Jon. And he also knew that ethically in his mind he had no choice but to try to do that anyway.
Game of Thrones, Season 8 Episode 5, "The Bells" - Inside the Episode
No episódio 4, a reação de Tyrion ao ver o rosto de Varys depois de perguntar o que acontecerá com ela é evidência suficiente por si só, nesse momento os dois personagens sabem que Varys tentará matá-la. E é demonstrado o suficiente que nós, os espectadores, deveríamos ter percebido isso.
Varys: You know where my loyalty stands. You know I will never betray the realm.
Tyrion: What is the realm? A vast continent, home to millions of people, most of whom don't care who sits on the Iron Throne.
Varys: Millions of people, many of whom will die if the wrong person sits on that throne. We don't know their names, but they're just as real as you and I. They deserve to live. They deserve food for their children. I will act in their interest, no matter the personal cost.
Tyrion: So, what happens to her? Please. Don't.
Varys: I've spoken as honestly as I can. Each of us has a choice to make. I pray we choose wisely.
Game of Thrones, Season 8 Episode 4, "The Last of the Starks"
Então vamos olhar a conversa de Martha novamente, eles estão "tentando novamente" no jantar, o que não é necessariamente estranho em si, mas Martha está preocupada com o fato de os soldados estarem olhando para ela. Por que ela ficaria preocupada se tudo que eles estão fazendo é trazer comida para ela? Varys diz que é o trabalho deles e, novamente, ele provavelmente diria isso de maneira diferente se não fosse pela tentativa de envenenamento.
Por fim, examine "Quanto maior o risco, maior a recompensa." Por que haveria um risco envolvido em simplesmente trazer comida para ela, se não havia mais? Não está apenas implícito, está fortemente implícito que Varys está tentando envenená-la através do uso de Martha. Na verdade, está tudo explicado para nós.
Varys: And? Nothing?
Martha: She won't eat.
Varys: We'll try again at supper.
Martha: I think they're watching me.
Varys: Who?
Martha: Her soldiers.
Varys: Of course they are. That's their job. What have I told you, Martha?
Martha: The greater the risk, the greater the reward.
Varys: Go on. They'll be missing you in the kitchen.
Game of Thrones, Season 8 Episode 5, "The Bells"