Sachverhalt:
A. Der 1950 geborene A._ meldete sich im Juni 2004 bei der Invalidenversicherung an und beantragte Berufsberatung und eine Rente. Nach Abklärungen verneinte die IV-Stelle Basel-Landschaft mit Verfügung vom 27. Januar 2005 den Anspruch auf eine Rente (Invaliditätsgrad: 32 %), was sie mit Einspracheentscheid vom 19. Dezember 2005 bestätigte. Dies blieb unangefochten. Im Juni 2006 meldete sich A._ erneut bei der Invalidenversicherung an und beantragte eine Rente. Die IV-Stelle Basel-Landschaft klärte die gesundheitlichen und erwerblichen Verhältnisse ab und führte das Vorbescheidverfahren durch. Mit Verfügung vom 4. Juli 2008 verneinte sie wiederum den Anspruch auf eine Rente (Invaliditätsgrad: 28 %). Mit Schreiben vom 18. Juli 2008 teilte die IV-Stelle dem Versicherten mit, die Voraussetzungen für den Anspruch auf Arbeitsvermittlung seien erfüllt. Es werde ihm Beratung und Unterstützung bei der Stellensuche gewährt.
B. Am 4. September 2008 liess A._ beim Kantonsgericht Basel-Landschaft, Abteilung Sozialversicherungsrecht, Beschwerde einreichen und beantragen, die Verfügung vom 4. Juli 2008 sei aufzuheben, die beruflichen Massnahmen und Integrationsmassnahmen seien durchzuführen und die entsprechenden (Warte-)Taggelder auszurichten; eventualiter sei ihm für die Zeit ab 1. August 2006 eine Dreiviertelsrente auszurichten und die Rentenbetreffnisse zu verzinsen. Nach Vernehmlassung der IV-Stelle wies das kantonale Gericht mit Entscheid vom 25. März 2009 die Beschwerde ab.
C. A._ lässt Beschwerde in öffentlich-rechtlichen Angelegenheiten führen mit den Rechtsbegehren, der Entscheid vom 25. März 2009 und die Verfügung vom 4. Juli 2008 seien aufzuheben und es seien angemessene berufliche Massnahmen und Integrationsmassnahmen durchzuführen und die entsprechenden Taggelder auszurichten.
Die IV-Stelle beantragt die Abweisung der Beschwerde.

Erwägungen:
1. Das Bundesgericht wendet das Recht von Amtes wegen an (<ref-law>). Insbesondere prüft es - auch ohne entsprechende Rüge - die richtige Behandlung der Eintretensvoraussetzungen durch die Vorinstanz (<ref-ruling> E. 1.2 S. 95; <ref-ruling> E. 1 S. 283; Urteil 9C_858/2007 vom 28. Januar 2008 E. 1).
2. 2.1 Die vorinstanzliche Beschwerde richtete sich gegen die Verfügung vom 4. Juli 2008, mit welcher die IV-Stelle den Anspruch auf eine Rente der Invalidenversicherung verneint hatte. Dieser Verwaltungsakt bildete, formell, Anfechtungsgegenstand im vorangegangenen Verfahren (RKUV 2003 Nr. U 495, U 243/00 E. 2.1) und stellte eine Sachurteilsvoraussetzung dar (<ref-ruling> E. 1a S. 414; Urteil 9C_199/2009 vom 9. Juni 2009 E. 2.1). Der Antrag in der Beschwerde lautete auf Zusprechung beruflicher Massnahmen und Integrationsmassnahmen sowie (eventualiter) einer Dreiviertelsrente der Invalidenversicherung für die Zeit ab 1. August 2006 samt Zins auf den (nachzuzahlenden) Rentenbetreffnissen. Die Vorinstanz hat die Begehren um Rente und Massnahmen beruflicher Art geprüft und als unbegründet abgewiesen.
2.2 Über den Anspruch auf Integrationsmassnahmen zur Vorbereitung auf die berufliche Eingliederung (<ref-law> und <ref-law>) und Massnahmen beruflicher Art (<ref-law> und <ref-law>) hatte die IV-Stelle abgesehen von der nach Verneinung eines Rentenanspruchs zugesprochenen Arbeitsvermittlung im Sinne von <ref-law> (Mitteilung vom 18. Juli 2008; <ref-law> in Verbindung mit <ref-law>) nicht verfügt. Insoweit fehlte es somit an einer Sachurteilsvoraussetzung (E. 2.1).
2.2.1 Eingliederungsfragen können zwar grundsätzlich auch im Rahmen eines Rentenstreites geprüft werden, vom Sozialversicherungsgericht allerdings nur, wenn die Voraussetzungen für die Ausdehnung des verwaltungsgerichtlichen Verfahrens auf eine ausserhalb des Anfechtungsgegenstandes liegende Frage gegeben sind (vgl. dazu <ref-ruling> E. 2a S. 36 mit Hinweisen). Dabei handelt es sich nicht um eine Pflicht, sondern um eine prozessuale Befugnis (Urteil des Eidg. Versicherungsgerichts I 10/05 vom 14. Juni 2005 E. 1.3 mit Hinweisen). Vorliegend waren von den Erfordernissen für eine Ausdehnung des Verfahrens auf die Frage des Anspruchs auf Massnahmen beruflicher Art Tatbestandsgesamtheit und Prozesserklärung der Verwaltung gegeben. Die IV-Stelle hatte sich dazu in der vorinstanzlichen Vernehmlassung geäussert. Die Sache war diesbezüglich jedoch nicht spruchreif. In der Mitteilung vom 18. Juli 2008, mit welcher die IV-Stelle den Anspruch auf Arbeitsvermittlung bejaht hatte, war ausdrücklich darauf hingewiesen worden, das Verfahren sei damit nicht abgeschlossen. Allfällige weitere Leistungsansprüche würden noch geprüft. Es bestehen keine Anhaltspunkte in den Akten, dass bereits vorher substantielle Abklärungen beruflicher Art stattgefunden hätten. Grund hiefür war den Ausführungen der IV-Stelle in der vorinstanzlichen Vernehmlassung zufolge in erster Linie offenbar die nach Auffassung der Verwaltung fehlende subjektive Eingliederungsbereitschaft des Versicherten, was dieser bestreitet. Wie es sich damit verhält, braucht hier nicht entschieden zu werden. Jedenfalls hat die IV-Stelle dieses Anspruchserfordernis in Bezug auf Arbeitsvermittlung bejaht (Urteil 9C_494/2007 vom 6. Mai 2008 E. 2.2.2). Entgegen den Vorbringen der Verwaltung in ihrer Vernehmlassung kann der Anspruch auf Eingliederungsmassnahmen beruflicher Art nicht mit der Begründung verneint werden, es bestehe eine Arbeitsfähigkeit von 100 % in Verweisungstätigkeiten, weshalb davon keine Steigerung der Erwerbsfähigkeit zu erwarten sei.
2.2.2 Im Übrigen bestand für die IV-Stelle insofern kein Anlass für Abklärungen im Hinblick auf eine Wiedereingliederung, als der Beschwerdeführer im zweiten Anmeldeformular nunmehr einzig eine Rente beantragt und während des gesamten zweiten Verwaltungsverfahrens sich nicht dahingehend geäussert hatte, allenfalls solche Massnahmen absolvieren zu wollen. Dies gilt auch in Bezug auf die beschwerdeweise konkret beantragten Arbeitstraining, Aufbautraining, Arbeit als Zeitüberbrückung und Support am Arbeitsplatz. Dabei handelt es sich um (mögliche) Integrationsmassnahmen zur Vorbereitung auf die berufliche Eingliederung nach dem seit 1. Januar 2008 in Kraft stehenden <ref-law> (vgl. Botschaft vom 22. Juni 2005 zur Änderung des Bundesgesetzes über die Invalidenversicherung [5. Revision], BBl 2005 S. 4523 und 4564). Solche Massnahmen gehen nach ihrem Sinn und Zweck beruflichen Massnahmen nach <ref-law> grundsätzlich vor und sind dementsprechend vorrangig zu prüfen. Den Anspruch auf Integrationsmassnahmen hat die Vorinstanz nicht geprüft, was nicht zu beanstanden ist. Auf das diesbezügliche Begehren in der Beschwerde ist daher nicht einzutreten.
2.3 Die Vorinstanz hat somit zu Unrecht den Anspruch auf berufliche Massnahmen, insbesondere Umschulung, geprüft und verneint. Insoweit verletzt der angefochtene Entscheid Bundesrecht und ist daher aufzuheben.
3. Im Rentenpunkt ist der vorinstanzliche Entscheid nicht angefochten und insoweit in Rechtskraft erwachsen (<ref-ruling> E. 2a S. 415; <ref-ruling> E. 2b S. 295).
4. Bei diesem Ausgang des Verfahrens ist der Beschwerdeführer als obsiegende Partei zu betrachten. Die IV-Stelle hat somit die Gerichtskosten zu tragen (<ref-law>) und dem Versicherten eine Parteientschädigung zu bezahlen (<ref-law>).

Demnach erkennt das Bundesgericht:
1. Die Beschwerde wird abgewiesen, soweit darauf einzutreten ist.
2. Der Entscheid des Kantonsgerichts Basel-Landschaft, Abteilung Sozialversicherungsrecht, vom 25. März 2009 wird aufgehoben, soweit er den Anspruch auf berufliche Massnahmen verneint.
3. Die Gerichtskosten von Fr. 500.- werden der IV-Stelle Basel-Landschaft auferlegt.
4. Die IV-Stelle Basel-Landschaft hat den Beschwerdeführer für das bundesgerichtliche Verfahren mit Fr. 2800.- zu entschädigen.
5. Dieses Urteil wird den Parteien, dem Kantonsgericht Basel-Landschaft, Abteilung Sozialversicherungsrecht, und dem Bundesamt für Sozialversicherungen schriftlich mitgeteilt.
Luzern, 14. September 2009
Im Namen der II. sozialrechtlichen Abteilung
des Schweizerischen Bundesgerichts
Der Präsident: Der Gerichtsschreiber:
Meyer Fessler