Faits: Faits: A. A._ et B._ sont copropriétaires d'une parcelle de 13'997 m2, sise en zone agricole sur le territoire de la commune de Chexbres (n° 1250 du registre foncier). Sur ce bien-fonds sont édifiés un bâtiment de 496 m2 comprenant des locaux d'habitation et une grange, ainsi qu'une annexe de 259 m2 et un garage de 54 m2. En 2003, les époux A._ et B._ ont construit, au sud de l'annexe, une serre d'une surface d'environ 77 m2 et d'une hauteur de 4 m au faîte. A une date indéterminée, ils ont également construit sur cette parcelle un pavillon d'agrément (gloriette). Par décision du 12 juin 2006, le Service cantonal de l'aménagement du territoire (devenu le Service du développement territorial) a ordonné la démolition de la serre et du pavillon d'agrément dans un délai fixé au 30 septembre 2006. Le 14 juillet 2006, les époux A._ et B._ ont signé une convention avec le maraîcher X._ et le cuisinier Y._. Cette convention prévoyait en substance qu'une partie de la parcelle susmentionnée était mise à la disposition de X._ pour la culture d'herbes aromatiques - éventuellement de fruits et de légumes - destinées au restaurant de Y._. A. A._ et B._ sont copropriétaires d'une parcelle de 13'997 m2, sise en zone agricole sur le territoire de la commune de Chexbres (n° 1250 du registre foncier). Sur ce bien-fonds sont édifiés un bâtiment de 496 m2 comprenant des locaux d'habitation et une grange, ainsi qu'une annexe de 259 m2 et un garage de 54 m2. En 2003, les époux A._ et B._ ont construit, au sud de l'annexe, une serre d'une surface d'environ 77 m2 et d'une hauteur de 4 m au faîte. A une date indéterminée, ils ont également construit sur cette parcelle un pavillon d'agrément (gloriette). Par décision du 12 juin 2006, le Service cantonal de l'aménagement du territoire (devenu le Service du développement territorial) a ordonné la démolition de la serre et du pavillon d'agrément dans un délai fixé au 30 septembre 2006. Le 14 juillet 2006, les époux A._ et B._ ont signé une convention avec le maraîcher X._ et le cuisinier Y._. Cette convention prévoyait en substance qu'une partie de la parcelle susmentionnée était mise à la disposition de X._ pour la culture d'herbes aromatiques - éventuellement de fruits et de légumes - destinées au restaurant de Y._. B. Les époux A._ et B._ ont recouru contre la décision du 12 juin 2006 auprès du Tribunal administratif du canton de Vaud, qui a rejeté le recours par arrêt du 23 mai 2007. Cette autorité a considéré que la serre n'était pas conforme à l'affectation de la zone agricole au sens de l'art. 16a de la loi sur l'aménagement du territoire du 22 juin 1979 (LAT; RS 700), car il s'agissait d'une installation servant à l'agriculture pratiquée en tant que loisir au sens de l'art. 34 al. 5 de l'ordonnance sur l'aménagement du territoire du 28 juin 2000 (OAT; RS 700.1). De plus, cette construction n'était manifestement pas imposée par sa destination au sens de l'art. 24 LAT. Quant au pavillon d'agrément, il était soumis à autorisation en application de l'art. 22 al. 1 LAT et il n'était pas conforme à l'affectation de la zone (art. 22 al. 2 let. a LAT) ni imposé par sa destination (art. 24 let. a LAT), de sorte qu'il ne pouvait pas être autorisé en zone agricole. Enfin, l'ordre de démolition de ces constructions respectait le principe de la proportionnalité. B. Les époux A._ et B._ ont recouru contre la décision du 12 juin 2006 auprès du Tribunal administratif du canton de Vaud, qui a rejeté le recours par arrêt du 23 mai 2007. Cette autorité a considéré que la serre n'était pas conforme à l'affectation de la zone agricole au sens de l'art. 16a de la loi sur l'aménagement du territoire du 22 juin 1979 (LAT; RS 700), car il s'agissait d'une installation servant à l'agriculture pratiquée en tant que loisir au sens de l'art. 34 al. 5 de l'ordonnance sur l'aménagement du territoire du 28 juin 2000 (OAT; RS 700.1). De plus, cette construction n'était manifestement pas imposée par sa destination au sens de l'art. 24 LAT. Quant au pavillon d'agrément, il était soumis à autorisation en application de l'art. 22 al. 1 LAT et il n'était pas conforme à l'affectation de la zone (art. 22 al. 2 let. a LAT) ni imposé par sa destination (art. 24 let. a LAT), de sorte qu'il ne pouvait pas être autorisé en zone agricole. Enfin, l'ordre de démolition de ces constructions respectait le principe de la proportionnalité. C. Agissant par la voie du recours en matière de droit public, A._ et B._ demandent au Tribunal fédéral de réformer cet arrêt en ce sens que leur recours contre la décision rendue le 12 juin 2006 par le Service cantonal de l'aménagement du territoire soit admis et cette décision annulée. Ils concluent subsidiairement à l'annulation de l'arrêt attaqué et au renvoi de la cause au Tribunal administratif pour nouveau jugement. Ils se plaignent d'une violation des art. 16, 16a, 22 et 24 LAT ainsi que du principe de la proportionnalité (art. 36 Cst.). Ils requièrent en outre l'octroi de l'effet suspensif et sollicitent une inspection des lieux. Le Tribunal administratif, la Municipalité de Chexbres et l'Office fédéral du développement territorial ont renoncé à formuler des observations. Le Service cantonal du développement territorial s'est déterminé; il conclut au rejet du recours. C. Agissant par la voie du recours en matière de droit public, A._ et B._ demandent au Tribunal fédéral de réformer cet arrêt en ce sens que leur recours contre la décision rendue le 12 juin 2006 par le Service cantonal de l'aménagement du territoire soit admis et cette décision annulée. Ils concluent subsidiairement à l'annulation de l'arrêt attaqué et au renvoi de la cause au Tribunal administratif pour nouveau jugement. Ils se plaignent d'une violation des art. 16, 16a, 22 et 24 LAT ainsi que du principe de la proportionnalité (art. 36 Cst.). Ils requièrent en outre l'octroi de l'effet suspensif et sollicitent une inspection des lieux. Le Tribunal administratif, la Municipalité de Chexbres et l'Office fédéral du développement territorial ont renoncé à formuler des observations. Le Service cantonal du développement territorial s'est déterminé; il conclut au rejet du recours. D. Par ordonnance du 18 juillet 2007, le Président de la Ire Cour de droit public a accordé l'effet suspensif au recours.