¿Está MySQL index_length en bytes?

Sí, son bytes. Lo mismo es válido para las otras longitudes en el estado de la tabla de visualización. Están todos en bytes:

Avg_row_length
Data_length
Max_data_length
Index_length