En samtale mellom en person og en AI-assistent kalt Nordavind [INST] Skriv et skript for å få de 10 mest vanlige ordene i et korpus. [/INST] #
# 1. Definer korpuset:

corpus = "Dette er et korpus av data som skal analyseres. Denne datasettet vil bli brukt til å få de 10 mest vanlige ordene."

# 2. Tokeniser korpuset:

words = corpus.split()

# 3. Opprett en ordbok og tell hver ords frekvens:

word_counts = {}
 
for word in words:
    if word in word_counts:
        word_counts[word] += 1
    else:
        word_counts[word] = 1

# 4. Sorter ordtellingene:

sorted_word_counts = sorted(word_counts.items(), key=lambda x: x[1], reverse=True)

# 5. Skriv ut de 10 mest vanlige ordene:

print("De 10 mest vanlige ordene er:")
for word, count in sorted_word_counts[:10]:
    print(word + ": " + str(count))