מאגרי מידע כלליים:

מאגרי מידע כלליים באינטרנט נקראים בשמות שונים כגון, אינדקס, מדריך, פורטל, ומנוע חיפוש.
אתרים אלה מגישים את המידע בדרך כלל באחת מתוך שתי הצורות הבאות:

1. אינדקס מסווג באופן הירארכי לפי נושאים ותת-נושאים.
2. מסד נתונים, ממנו נשלפות רשומות על פי מילות החיפוש והתנאים הבוליאניים.

מאגרי מידע אלו נבנו בדרך כלל בעזרת תוכנות הנקראות רובוטים, עכבישים או תולעים.
אלו הם כלים הסורקים אתרים באינטרנט (באופן שיטתי או על פי פקודה), ומוצאים מילות מפתח באתרים שנסרקו,
את רשימת המילים הן שומרות במסד נתונים המקשר בין המילים הללו לבין כתובת האתר.
בתהליך החיפוש - כאשר גולש מחפש מילה או צמד מילים, מנוע החיפוש מחפש במסד המידע את האתרים המתאימים.
החיפוש לא מתבצע בכל האינטרנט אלא רק במסד הנתונים הקיים.
 

מעט הרחבה על אינדקסים: בן-אדם מצא אתרים באינטרנט, העריך, סינן וקטלג אתרים אלו, וערך אותם בעץ נושאים לפי שיטתו.
לחיצה על אחד מהנושאים הראשיים תפתח רשימה של נושאים משניים בנושא הראשי, לחיצה על אחד מהם תפתח רשימת תת=תתי-נושאים, וכן הלאה, עד שנגיע לקישור לאתרים בתת-תת הנושא.

כול פריט באינדקס מכיל פיסקה המתארת את האתר וקישור אל כתובת האתר.
חלק מהאינדקסים מוסיפים לתיאור גם ביקורת איכותית קצרה (המלצה), לפי טעמו של כותב האינדקס.
מאחר וקטלוג האתרים תלוי בבני אדם, ובקצב עבודתם, מספר האתרים מוגבל, ולעיתים יש פער זמן בין  תאריך היווצרות / עדכון / העלמות האתר לבין עדכונו באינדקס.

מנוע חיפוש: תוכנה הסורקת את הרשת כל העת, מאתרת אתרים חדשים שנוספו, עוברת על תמלילי האתרים ומצרפת את כתובותיהם ל "עץ-מילים" בהתאם למילים שנמצאו באתרים.
כל פריט מכיל קישור לאתר, ללא פיסקה מתארת, אך לפעמים עם משפט רלוונטי מתוך המלל שבאתר.