被告应在法定期间内提供与被诉行政行为合法性相关的所有证据。一般而言，被告若要证明行政行为的合法性，应从以下五个方面来提供证据：
1.有关主体的证据材料，如果原告对行政主体的职权存在争议的，应该提出有关其职权依据的证据。
2.有关行政程序的证据材料。行政行为合法性的一个重要方面就是程序合法。同时，程序合法也是法庭审理的重要内容。
3.有关被诉行政行为认定所认定事实的证据材料。主要提供书面决定中已经记载的事实或列入行政案件卷宗被行政主体采纳的事实。
4.自由裁量合理性的证据材料。行政机关对案件的处理往往存在一定的自由裁量空间，我们知道，没有事实根据的自由裁量往往存在滥用职权问题，因此被告应提供自由裁量合理性的证据材料。
5.有关被诉行政行为所依据的规范性文件。被告向法庭提供大规范性文件，除法律、法规外，还包括规章和规章以下的规范性文件。
《行政诉讼法》第三十四条被告对作出的行政行为负有举证责任，应当提供作出该行政行为的证据和所依据的规范性文件。被告不提供或者无正当理由逾期提供证据，视为没有相应证据。但是，被诉行政行为涉及第三人合法权益，第三人提供证据的除外。
