Sachverhalt: A. Bei der Veranlagung der direkten Bundessteuer 2010 rechnete die Kantonale Verwaltung für die direkte Bundessteuer Schwyz bei A.A._ und A.B._ (nachfolgend die Steuerpflichtigen und Beschwerdeführer) einen Gewinn von Fr. 342'068.-- abzüglich 10 % AHV, entsprechend Fr. 307'861.--, aus gewerbsmässigem Liegenschaftenhandel zum steuerbaren Einkommen hinzu. In der Abweichungsbegründung hiess es, der Gewinn von Fr. 342'068.-- aus gewerbsmässigem Liegenschaftenhandel in U._/NW unterliege beim Bund der Steuerpflicht. Mit Einsprache machten die Steuerpflichtigen geltend, Kauf und Verkauf der beiden Baulandparzellen in U._/NW seien im Rahmen einer einfachen (stillen) Gesellschaft erfolgt, an welcher nebst dem Steuerpflichtigen auch C._ (zu 25 %) und D._ (zu 100 %) beteiligt seien. Nach aussen sei der Steuerpflichtige in eigenem Namen als Käufer und Verkäufer aufgetreten. Nach innen habe er aber auf Rechnung der Gesellschaft gehandelt. Sie (die Steuerpflichtigen) seien daher entsprechend der Beteiligung des Steuerpflichtigen an der einfachen (stillen) Gesellschaft von 25 % zu besteuern. Der Einsprache legten sie den Gesellschaftsvertrag bei. Mit Entscheid vom 11. Juli 2014 wies die Kantonale Verwaltung für die direkte Bundessteuer die Einsprache ab. Eine Beschwerde der Steuerpflichtigen wurde vom Verwaltungsgericht des Kantons Schwyz mit Urteil vom 17. März 2015 ebenfalls abgewiesen. B. Mit Beschwerde in öffentlich-rechtlichen Angelegenheiten beantragen die Steuerpflichtigen, es sei das steuer- und satzbestimmende Einkommen für die direkte Bundessteuer 2010 um Fr. 230'900.-- (75 % von Fr. 342'068.-- abzüglich AHV) auf Fr. 471'400.-- zu reduzieren. Steuerkommission des Kantons Schwyz und Eidgenössische Steuerverwaltung beantragen Abweisung der Beschwerde. Das Verwaltungsgericht des Kantons Schwyz verzichtete auf eine Vernehmlassung.