solr-indexering

1. Wat is SOLR-indexering?
2. Hoe weet ik of Solr indexeert?
3. Hoe lang duurt het indexeren van SOLR?
4. Wat is SOLR en hoe het werkt?
5. Dat is beter SOLR of Elasticsearch?
6. Waar staat SOLR voor?
7. Wat wordt bedoeld met indexeren?
8. Kan SOLR als database worden gebruikt?
9. Waar wordt de SOLR-index opgeslagen?
10. Hoeveel RAM heeft SOLR nodig?
11. Hoeveel gegevens kan SOLR verwerken?
12. Hoe wordt de SOLR-indexgrootte berekend?

Wat is SOLR-indexering?

Door content aan een index toe te voegen, maken we deze door Solr doorzoekbaar. Een Solr-index kan gegevens uit veel verschillende bronnen accepteren, waaronder XML-bestanden, bestanden met door komma's gescheiden waarden (CSV), gegevens die zijn geëxtraheerd uit tabellen in een database en bestanden in gangbare bestandsindelingen zoals Microsoft Word of PDF.

Hoe weet ik of Solr indexeert?

De indexeringsstatus controleren met behulp van de Core Admin

Om de indexeringsstatus te controleren, opent u de Solr Admin en klikt u op Core Admin.

Hoe lang duurt het indexeren van SOLR?

We vertellen gebruikers dat het ongeveer 5 minuten duurt voordat de wijzigingen zijn doorgevoerd naar SOLR, en tot nu toe is iedereen daar blij mee. Uit mijn ervaring kan het indexeren van grote hoeveelheden gegevens even duren. Index waar ik aan werk heeft 2 miljoen items (maat: 10G). Volledige indexering duurt ongeveer 40 uur met DB.

Wat is SOLR en hoe het werkt?

Solr gebruikt Lucene om een ​​geïnverteerde index te maken, omdat het een paginagerichte datastructuur (documenten ⇒ woorden) omkeert naar een trefwoordgerichte structuur (woord ⇒ documenten). Het is net als de index die je aan het einde van elk boek ziet, waar je kunt vinden waar bepaalde woorden in het boek voorkomen. ... Solr gebruikt velden om een ​​document te indexeren.

Dat is beter SOLR of Elasticsearch?

Solr past beter in bedrijfstoepassingen die al big data-ecosysteemtools implementeren, zoals Hadoop en Spark. ... Elasticsearch is meer gericht op schalen, gegevensanalyse en het verwerken van tijdreeksgegevens om zinvolle inzichten en patronen te verkrijgen. De grootschalige prestaties van loganalyses maken het behoorlijk populair.

Waar staat SOLR voor?

SOLR

Wat wordt bedoeld met indexeren?

Indexeren is het samenvoegen van economische gegevens in een enkele metriek of het vergelijken van gegevens met een dergelijke metriek. Er zijn veel financiële indexen die reflecteren op de economische activiteit of de marktactiviteit samenvatten - dit worden prestatiebenchmarks waaraan portefeuilles en fondsbeheerders worden afgemeten.

Kan SOLR als database worden gebruikt?

Ja, u kunt SOLR als een database gebruiken, maar er zijn enkele echt ernstige kanttekeningen: ... Bovendien streamt SOLR GEEN gegevens - dus u kunt niet lui door miljoenen records tegelijk herhalen. Dit betekent dat u zeer attent moet zijn wanneer u grootschalige datatoegangspatronen ontwerpt met SOLR.

Waar wordt de SOLR-index opgeslagen?

Solr slaat deze index op in een directory met de naam index in de datadirectory.

Hoeveel RAM heeft SOLR nodig?

Als vuistregel geldt dat de aanbevolen minimumgrootte van direct geheugen 8G is voor een productiesysteem als docValues ​​niet wordt gebruikt in schema en 12-16G als docValues ​​wordt gebruikt. Een gerelateerde configuratie is het aantal blokcache-platen (Cloudera Manager->Solr-configuratie->slab count) die moet overeenkomen met de directe geheugengrootte.

Hoeveel gegevens kan SOLR verwerken?

Ik neem aan dat 5TB-gegevens 7TB zullen zijn wanneer solr het indexeert volgens het filter dat ik gebruik. En dan zal ik bijna 50 MB aan gegevens per uur toevoegen aan dezelfde index.

Hoe wordt de SOLR-indexgrootte berekend?

Als u op zoek bent naar de fysieke grootte van de index op de schijf, kunt u de map 'data / index' onder 'dataDir' bekijken volgens de definitie in solrconfig. xml. Voor bijv. in voorbeeldindex is dit de map example / solr / data / index.