Connector Search Engine

Este addon utiliza el paquete nativo json de python. Cuando se recalcula un json para un registro, el nuevo valor se compara con el original para ver si es necesaria una exportación al índice del motor de búsqueda. Esto se hace comparando el md5 de las dos cadenas json. Este proceso, cuando se realiza sobre un gran número de registros, puede ser lento cuando el json es grande y complejo. Para acelerar este proceso puedes instalar el paquete orjson.

pip install orjson

Descripción general

Un motor de búsqueda es un sistema diseñado para almacenar información de forma que sea fácil de encontrar mediante consultas de búsqueda y analíticas. La principal diferencia entre un motor de búsqueda y una base de datos es que un motor de búsqueda está optimizado para consultas de búsqueda y analíticas, mientras que una base de datos está optimizada para consultas transaccionales y relacionales.

Este addon está diseñado en torno a 4 conceptos principales:

• El backend del motor de búsqueda se utiliza para definir en Odoo el tipo de motor de búsqueda que se utilizará para indexar los datos. Su responsabilidad principal es proporcionar una instancia de odoo.addons.search_engine.tools.adapter.SearchEngineAdapter que se utilizará para comunicarse con el motor de búsqueda.
• El índice del motor de búsqueda se utiliza para definir en Odoo el índice donde se indexarán los datos. Un índice siempre está vinculado a un backend de motor de búsqueda. El índice proporciona métodos para gestionar el ciclo de vida de los datos introducidos en el índice para los registros de un modelo dado. Para ello, utiliza:
• El SearchEngineAdapter proporcionado por el backend para comunicarse con el motor de búsqueda.
• Un ModelSerializer que se utiliza para transformar un registro de odoo en un diccionario que pueda indexarse en el motor de búsqueda.
• Un JsonValidator que se utiliza para validar los datos que se van a indexar en el motor de búsqueda. El RecordSerializer y el IndexDataValidator se definen en el propio índice. El addon actual proporciona una implementación predeterminada solo para el IndexDataValidator. Puedes encontrar en el repositorio de github search-engine una implementación del RecordSerializer basada en el addon jsonifier connector_search_engine_jsonifier.
• El registro indexable del motor de búsqueda es un mixin que se utiliza para definir los registros que pueden indexarse en un índice del motor de búsqueda. El mixin proporciona métodos:
• Para añadir un registro a un índice.
• Para eliminar un registro de un índice.
• Para marcar el registro en un índice (los enlaces del motor de búsqueda) como pendiente de recálculo (este método debe llamarse cuando se realizan modificaciones en el registro que podrían afectar a los datos indexados en el motor de búsqueda. Indicará al índice que el registro debe recalcularse y reindexarse). También garantiza que, cuando se desvincula el registro, se elimine de los índices en los que estaba indexado.
• El enlace del motor de búsqueda es un modelo que representa el vínculo entre un índice y un registro indexable de odoo. Te da acceso a los datos indexados en el motor de búsqueda para el registro. También se utiliza para gestionar el ciclo de vida de los datos en el motor de búsqueda. Cuando se crea un enlace, se marca como pendiente de cálculo. Una vez calculados los datos, el enlace se marca como pendiente de indexación. Una vez indexados los datos, el enlace se marca como indexado. Si se desvincula el registro enlazado, el enlace se marca como pendiente de eliminación. Una vez eliminados los datos del motor de búsqueda, se elimina el enlace.

Ciclo de vida de la indexación

El ciclo de vida de la indexación se basa en los siguientes pasos:

• Cuando se añade un registro a un índice, se crea un enlace y se marca como pendiente de cálculo.
• Un cron job programado cada 5 minutos buscará los enlaces pendientes de cálculo y, para cada uno de ellos, programará un job para recalcular los datos json.
• Cuando se calculan los datos json, el enlace se marca como pendiente de exportación si el json es válido y es diferente del calculado la última vez.
• Un cron job programado cada 5 minutos garantizará la sincronización con el motor de búsqueda. Hará lo siguiente:
• buscar los enlaces pendientes de exportación y, para cada uno de ellos, programará un job para exportar los datos json al motor de búsqueda. Una vez exportados, el enlace se marca como 'done'.
• buscar los enlaces pendientes de eliminación y, para cada uno de ellos, programará un job para eliminar los datos del motor de búsqueda. Una vez eliminados, se elimina el enlace.

Para mantener sincronizados los datos de la instancia de tu modelo y los datos indexados en el motor de búsqueda, debes llamar al método _se_mark_to_update en la instancia del modelo cuando realices modificaciones que podrían afectar a los datos indexados en el motor de búsqueda.

• Cuando se llama al método _se_mark_to_update, el enlace se marca como pendiente de cálculo.
• A partir de ahí, se utilizará el mismo proceso descrito anteriormente para recalcular los datos y reindexarlos en el motor de búsqueda.

Cuando se desvincula una instancia de modelo, el enlace se marca como pendiente de eliminación. A partir de ahí, será procesado por el job que sincroniza los datos con el motor de búsqueda.

> [!NOTE] > En versiones anteriores de este addon, no había ningún método para marcar un > registro como pendiente de recálculo. Como consecuencia, todos los registros se > recalculaban cada día para garantizar que los datos en el motor de búsqueda > estuvieran actualizados. Esto suponía un problema de rendimiento y consumía muchos > recursos. Si a pesar de esto quieres recalcular todos los registros > cada día, puedes activar el cron job Search engine: recompute all > index y desactivar el llamado earch engine: Generate job for > recompute binding para recalcular por índice.