Faits : A. Par arrêt du 3 novembre 1998, la Cour d'assises de la République et canton de Genève a condamné X._ pour viol avec cruauté et rupture de ban à une peine privative de liberté de cinq ans. L'exécution de la peine a été suspendue au profit d'un internement au sens de l'art. 43 aCP. Le 5 décembre 2008, le Tribunal d'application des peines et mesures de la République et canton de Genève a ordonné le maintien de l'internement de X._ au sens de l'art. 64 CP. Dès le 5 mars 2009, X._ a continué l'exécution de cette mesure au sein des Établissements de la Plaine de l'Orbe (ci-après EPO), sur décision du Service d'application des peines et mesures de la République et canton de Genève (ci-après SAPEM). B. Par décision du 12 février 2014, la Direction des EPO a ordonné le transfert de X._ dès le 17 février 2014 à l'établissement de Champ-Dollon à Genève. Même si l'intéressé niait la planification d'une évasion avec l'aide d'une arme, les informations recueillies laissaient apparaître l'existence fondée d'un tel risque. C. Le 17 mars 2014, X._ a recouru contre cette décision auprès du juge d'application des peines du canton de Vaud, autorité de recours indiquée au pied de la décision du 12 février 2014. Interpellé, le SAPEM a conclu au rejet du recours, puis s'est finalement vu transmettre le dossier, étant l'autorité compétente pour en connaître. Par décision de transfert du 8 août 2014, le SAPEM a ordonné le placement de X._ à la prison de Champ-Dollon. Cette autorité constatait la nullité de la décision précitée de la Direction des EPO, non compétente. Le transfert était toutefois justifié vu le risque d'évasion avec prise d'otage découlant des éléments mis en évidence par le rapport du 21 février 2014 de la Direction des EPO. Il se justifiait dès lors de déplacer l'intéressé dans un autre établissement. Au vu de la surpopulation carcérale touchant la Suisse, les délais de transfert étaient de plusieurs mois. A Genève, le seul établissement prévu pour les exécutions de peine en régime ordinaire dans le canton était celui de la Brenaz. Cet établissement n'offrait toutefois pas les garanties sécuritaires suffisantes pour une personne sous mesure d'internement au sens de l'art. 64 CP. La seule possibilité restant à la disposition était de placer X._ à la prison de Champ-Dollon. D. Le 18 août 2014, X._ a formé recours contre cette décision auprès de l'autorité indiquée au pied de celle-là, soit la Chambre pénale de recours de la Cour de justice de la République et canton de Genève. Cette autorité a procédé à un échange de vues avec la Chambre administrative de la Cour de justice de la République et canton de Genève, au terme duquel celle-ci a fait savoir, le 11 décembre 2014, qu'elle admettait devoir se saisir du dossier pour raison de compétence. Par arrêt du 23 juin 2015, la Chambre administrative a rejeté le recours formé le 18 août 2014. S'agissant de la décision du SAPEM de transférer X._ à Champ-Dollon, elle a estimé que cette autorité n'avait pas violé son pouvoir d'appréciation. Eu égard à la situation qui se présentait aux EPO où X._ avait été placé, il était conforme au droit, en vertu du principe de précaution, que le SAPEM confirme la décision de la Direction des EPO et décide d'un transfert de X._ à la prison de Champ-Dollon. La Chambre administrative a également pris acte des plaintes de X._ quant au fait qu'il se trouvait toujours à Champ-Dollon et quant à ses conditions de détention depuis son transfert dans cet établissement. Elle a toutefois indiqué que si elle était compétente en matière de contentieux disciplinaire lié à l'incarcération, son rôle n'était pas de contrôler matériellement la façon dont le Département de la sécurité et de l'économie et le SAPEM exerçaient leurs prérogatives découlant de la loi genevoise d'application du code pénal suisse et d'autres lois fédérales en matière pénale (LaCP/GE; RS/GE E 4 10), le contentieux relatif aux décisions en matière de suivi et de modalités d'exécution des peines et mesures étant traité dans le cadre de l'art. 42 LaCP/GE. E. X._ forme un recours en matière pénale auprès du Tribunal fédéral contre l'arrêt du 23 juin 2015. Il conclut à son annulation, à être replacé dans la situation qui était la sienne avant la décision de transfert du 12 février 2014 et à l'octroi d'une juste indemnité en dédomma gement du traitement subi. Il sollicite l'assistance judiciaire.