Conteggio delle occorrenze di parole in una colonna della tabella

@Elad Meidar, mi piace la tua domanda e ho trovato una soluzione:

SELECT SUM(total_count) as total, value
FROM (

SELECT count(*) AS total_count, REPLACE(REPLACE(REPLACE(x.value,'?',''),'.',''),'!','') as value
FROM (
SELECT SUBSTRING_INDEX(SUBSTRING_INDEX(t.sentence, ' ', n.n), ' ', -1) value
  FROM table_name t CROSS JOIN 
(
   SELECT a.N + b.N * 10 + 1 n
     FROM 
    (SELECT 0 AS N UNION ALL SELECT 1 UNION ALL SELECT 2 UNION ALL SELECT 3 UNION ALL SELECT 4 UNION ALL SELECT 5 UNION ALL SELECT 6 UNION ALL SELECT 7 UNION ALL SELECT 8 UNION ALL SELECT 9) a
   ,(SELECT 0 AS N UNION ALL SELECT 1 UNION ALL SELECT 2 UNION ALL SELECT 3 UNION ALL SELECT 4 UNION ALL SELECT 5 UNION ALL SELECT 6 UNION ALL SELECT 7 UNION ALL SELECT 8 UNION ALL SELECT 9) b
    ORDER BY n
) n
 WHERE n.n <= 1 + (LENGTH(t.sentence) - LENGTH(REPLACE(t.sentence, ' ', '')))
 ORDER BY value

) AS x
GROUP BY x.value

) AS y
GROUP BY value

Ecco il violino funzionante completo:http://sqlfiddle.com/#!2/17481a/ 1

Per prima cosa eseguiamo una query per estrarre tutte le parole come spiegato qui di @peterm(segui le sue istruzioni se vuoi personalizzare il numero totale di parole elaborate). Quindi lo convertiamo in una sottoquery e quindi COUNT e GROUP BY il valore di ogni parola, quindi esegui un'altra query in aggiunta a GROUP BY parole non raggruppate casi in cui potrebbero essere presenti segni accompagnati. cioè:ciao =ciao! con un REPLACE