Θεωρία πληροφοριών

Βασικές έννοιες της θεωρίας εισάγονται στα σαράντα του εικοστού αιώνα, Shannon. θεωρία πληροφοριών - η επιστήμη της διαδικασίας μεταφοράς, αποθήκευσης και ανάκτησης δεδομένων σε φυσικά, τεχνικά και κοινωνικά συστήματα. Σε πολλές εφαρμογές των επιστημονικών πεδίων, όπως η πληροφορική, η γλωσσολογία, κρυπτογραφία, θεωρία ελέγχου, επεξεργασία εικόνας, η γενετική, η ψυχολογία, την οικονομία, την οργάνωση των μεθόδων παραγωγής που χρησιμοποιούνται αυτή την επιστήμη.

Στις σύγχρονες συνθήκες με τη θεωρία της πληροφορίας πολύ στενά συνδεδεμένη με κωδικεύουσα θεωρία, συζητά τα πιο κοινά προβλήματα συμμόρφωσης μεταξύ ενός σήματος και ενός μηνύματος, και τη θεωρία της επεξεργασίας σήματος, όπου η κβαντοποίηση μελετηθεί και σήματα ανάκτηση και φασματικά και ανάλυσης συσχέτισης αυτών.

θεωρία της πληροφορίας θεωρεί ότι η βασική έννοια των «πληροφοριών» ως επί το πλείστον ποσοτικά, χωρίς να λαμβάνει υπόψη την αξία του, και μερικές φορές χωρίς νόημα. Σε αυτή την προσέγγιση, μια σελίδα του κειμένου θα περιέχει περίπου την ίδια ποσότητα δεδομένων που καθορίζεται από μια σειρά από σημεία και σύμβολα, και δεν εξαρτάται από το γεγονός ότι, για να κυριολεκτήσουμε, δεν είναι τυπωμένο, ακόμη και αν αυτό είναι απολύτως παράλογη και χαοτική σύνολο ορισμένων συμβόλων.

Η προσέγγιση αυτή δικαιολογείται, αλλά μόνο για την προσομοίωση των συστημάτων επικοινωνίας, δεδομένου ότι πρέπει να διαβιβάζουν με ακρίβεια πληροφορίες για τα κανάλια επικοινωνίας, το οποίο μπορεί να είναι οποιοδήποτε σύνολο χαρακτήρων και συμβόλων. Στη συνέχεια, όταν είναι αναγκαίο να ληφθεί υπόψη η αξία και το νόημα των δεδομένων, ποσοτική προσέγγιση είναι απαράδεκτη. Αυτές οι περιστάσεις επιβάλλουν σημαντικούς περιορισμούς στον τομέα της ενδεχόμενης εφαρμογής αυτής της θεωρίας.

Βασικές αρχές της θεωρίας πληροφοριών περιλαμβάνει την εξέταση των διαφόρων θεμάτων, μεταξύ των οποίων σχετίζεται άμεσα με την μετάδοση και λήψη δεδομένων. Το κύριο σύστημα επικοινωνίας, το οποίο θεωρείται στη διδασκαλία έχει ως εξής. Θεωρία Πληροφορίας και Κωδικοποίησης Θεωρεί ότι αυτά είναι η πηγή των μηνυμάτων, το οποίο είναι μια λέξη ή ένα σύνολο λέξεων γραπτή ορισμένα γράμματα του αλφαβήτου. Η πηγή του μηνύματος μπορεί να είναι κείμενο σε οποιοδήποτε φυσικό ή τεχνητή γλώσσα, την ανθρώπινη γλώσσα, βάση δεδομένων και κάποια μαθηματικά μοντέλα, δημιουργώντας μια ακολουθία γραμμάτων. Ο πομπός μετατρέπει το μήνυμα σε ένα σήμα που αντιστοιχεί στην φυσική φύση του καναλιού επικοινωνίας - μέσο για τη μετάδοση σήματος. Κατά το πέρασμα αυτών υπόκειται σε παρεμβολές, οι οποίες εισάγουν στρεβλώσεις στην τιμή των παραμέτρων πληροφορίες. Ο δέκτης ανακτά το αρχικό μήνυμα από το λαμβανόμενο σήμα παραμορφωμένη. Μήνυμα σε μειωμένη μορφή έρχεται στον προορισμό - ένα συγκεκριμένο άτομο ή μια τεχνική συσκευή.

πηγή μήνυμα είναι στατιστικά στη φύση, δηλαδή η εμφάνιση του κάθε μηνύματος καθορίζεται από μια ορισμένη πιθανότητα. θεωρία της πληροφορίας του Shannon πιστεύει ότι εάν η πιθανότητα του μηνύματος είναι ίση με ενότητα, δηλαδή, την εμφάνισή του σημαντικά και οι αβεβαιότητες δεν πιστεύω ότι δεν φέρει καμία πληροφορία.

Ένα από τα σημαντικότερα προβλήματα της θεωρίας πληροφορίας θεωρεί τον συντονισμό των ιδιοτήτων του καναλιού επικοινωνίας και ενημέρωσης της πηγής του μηνύματος. Εύρος ζώνης προσδιορίζεται από τη μονάδα του 1 bit ανά δευτερόλεπτο.

Ένα πρόβλημα με τα συστήματα επικοινωνίας είναι παρεμβολή με την επιθυμητή διαδρομή σήματος. Shannon, δυστυχώς, δεν μας δίνουν τις συγκεκριμένες μεθόδους για την αντιμετώπιση εκείνους. Ο ευκολότερος τρόπος απομάκρυνσης που έχει επαναληφθεί πολλές φορές τα μηνύματα δεν είναι πολύ αποτελεσματική, διότι χρειάζεται περισσότερο το κόστος χρόνος για τη διαβίβαση των πληροφοριών. Πολύ μεγαλύτερη αποτελεσματικότητα επιτρέπει τη χρήση των κωδικών που σας επιτρέπουν να εντοπίζουν και να διορθώνουν τα λάθη της μετάδοσης δεδομένων.