/ Hex Artifact Content
Login

Artifact 39f12034b598df4e0f59bbe6cf03af03a905a534b04f182d155641a04e1eb797:


0000: 2f 2a 0a 2a 2a 20 32 30 31 34 20 4d 61 79 20 33  /*.** 2014 May 3
0010: 31 0a 2a 2a 0a 2a 2a 20 54 68 65 20 61 75 74 68  1.**.** The auth
0020: 6f 72 20 64 69 73 63 6c 61 69 6d 73 20 63 6f 70  or disclaims cop
0030: 79 72 69 67 68 74 20 74 6f 20 74 68 69 73 20 73  yright to this s
0040: 6f 75 72 63 65 20 63 6f 64 65 2e 20 20 49 6e 20  ource code.  In 
0050: 70 6c 61 63 65 20 6f 66 0a 2a 2a 20 61 20 6c 65  place of.** a le
0060: 67 61 6c 20 6e 6f 74 69 63 65 2c 20 68 65 72 65  gal notice, here
0070: 20 69 73 20 61 20 62 6c 65 73 73 69 6e 67 3a 0a   is a blessing:.
0080: 2a 2a 0a 2a 2a 20 20 20 20 4d 61 79 20 79 6f 75  **.**    May you
0090: 20 64 6f 20 67 6f 6f 64 20 61 6e 64 20 6e 6f 74   do good and not
00a0: 20 65 76 69 6c 2e 0a 2a 2a 20 20 20 20 4d 61 79   evil..**    May
00b0: 20 79 6f 75 20 66 69 6e 64 20 66 6f 72 67 69 76   you find forgiv
00c0: 65 6e 65 73 73 20 66 6f 72 20 79 6f 75 72 73 65  eness for yourse
00d0: 6c 66 20 61 6e 64 20 66 6f 72 67 69 76 65 20 6f  lf and forgive o
00e0: 74 68 65 72 73 2e 0a 2a 2a 20 20 20 20 4d 61 79  thers..**    May
00f0: 20 79 6f 75 20 73 68 61 72 65 20 66 72 65 65 6c   you share freel
0100: 79 2c 20 6e 65 76 65 72 20 74 61 6b 69 6e 67 20  y, never taking 
0110: 6d 6f 72 65 20 74 68 61 6e 20 79 6f 75 20 67 69  more than you gi
0120: 76 65 2e 0a 2a 2a 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ve..**.*********
0130: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0140: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0150: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0160: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0170: 2a 2a 2a 2a 2a 0a 2a 2a 0a 2a 2f 0a 23 69 66 6e  *****.**.*/.#ifn
0180: 64 65 66 20 5f 46 54 53 35 49 4e 54 5f 48 0a 23  def _FTS5INT_H.#
0190: 64 65 66 69 6e 65 20 5f 46 54 53 35 49 4e 54 5f  define _FTS5INT_
01a0: 48 0a 0a 23 69 6e 63 6c 75 64 65 20 22 66 74 73  H..#include "fts
01b0: 35 2e 68 22 0a 23 69 6e 63 6c 75 64 65 20 22 73  5.h".#include "s
01c0: 71 6c 69 74 65 33 65 78 74 2e 68 22 0a 53 51 4c  qlite3ext.h".SQL
01d0: 49 54 45 5f 45 58 54 45 4e 53 49 4f 4e 5f 49 4e  ITE_EXTENSION_IN
01e0: 49 54 31 0a 0a 23 69 6e 63 6c 75 64 65 20 3c 73  IT1..#include <s
01f0: 74 72 69 6e 67 2e 68 3e 0a 23 69 6e 63 6c 75 64  tring.h>.#includ
0200: 65 20 3c 61 73 73 65 72 74 2e 68 3e 0a 0a 23 69  e <assert.h>..#i
0210: 66 6e 64 65 66 20 53 51 4c 49 54 45 5f 41 4d 41  fndef SQLITE_AMA
0220: 4c 47 41 4d 41 54 49 4f 4e 0a 0a 74 79 70 65 64  LGAMATION..typed
0230: 65 66 20 75 6e 73 69 67 6e 65 64 20 63 68 61 72  ef unsigned char
0240: 20 20 75 38 3b 0a 74 79 70 65 64 65 66 20 75 6e    u8;.typedef un
0250: 73 69 67 6e 65 64 20 69 6e 74 20 20 20 75 33 32  signed int   u32
0260: 3b 0a 74 79 70 65 64 65 66 20 75 6e 73 69 67 6e  ;.typedef unsign
0270: 65 64 20 73 68 6f 72 74 20 75 31 36 3b 0a 74 79  ed short u16;.ty
0280: 70 65 64 65 66 20 73 68 6f 72 74 20 69 31 36 3b  pedef short i16;
0290: 0a 74 79 70 65 64 65 66 20 73 71 6c 69 74 65 33  .typedef sqlite3
02a0: 5f 69 6e 74 36 34 20 69 36 34 3b 0a 74 79 70 65  _int64 i64;.type
02b0: 64 65 66 20 73 71 6c 69 74 65 33 5f 75 69 6e 74  def sqlite3_uint
02c0: 36 34 20 75 36 34 3b 0a 0a 23 69 66 6e 64 65 66  64 u64;..#ifndef
02d0: 20 41 72 72 61 79 53 69 7a 65 0a 23 20 64 65 66   ArraySize.# def
02e0: 69 6e 65 20 41 72 72 61 79 53 69 7a 65 28 78 29  ine ArraySize(x)
02f0: 20 28 28 69 6e 74 29 28 73 69 7a 65 6f 66 28 78   ((int)(sizeof(x
0300: 29 20 2f 20 73 69 7a 65 6f 66 28 78 5b 30 5d 29  ) / sizeof(x[0])
0310: 29 29 0a 23 65 6e 64 69 66 0a 0a 23 64 65 66 69  )).#endif..#defi
0320: 6e 65 20 74 65 73 74 63 61 73 65 28 78 29 0a 23  ne testcase(x).#
0330: 64 65 66 69 6e 65 20 41 4c 57 41 59 53 28 78 29  define ALWAYS(x)
0340: 20 31 0a 23 64 65 66 69 6e 65 20 4e 45 56 45 52   1.#define NEVER
0350: 28 78 29 20 30 0a 0a 23 64 65 66 69 6e 65 20 4d  (x) 0..#define M
0360: 49 4e 28 78 2c 79 29 20 28 28 28 78 29 20 3c 20  IN(x,y) (((x) < 
0370: 28 79 29 29 20 3f 20 28 78 29 20 3a 20 28 79 29  (y)) ? (x) : (y)
0380: 29 0a 23 64 65 66 69 6e 65 20 4d 41 58 28 78 2c  ).#define MAX(x,
0390: 79 29 20 28 28 28 78 29 20 3e 20 28 79 29 29 20  y) (((x) > (y)) 
03a0: 3f 20 28 78 29 20 3a 20 28 79 29 29 0a 0a 2f 2a  ? (x) : (y))../*
03b0: 0a 2a 2a 20 43 6f 6e 73 74 61 6e 74 73 20 66 6f  .** Constants fo
03c0: 72 20 74 68 65 20 6c 61 72 67 65 73 74 20 61 6e  r the largest an
03d0: 64 20 73 6d 61 6c 6c 65 73 74 20 70 6f 73 73 69  d smallest possi
03e0: 62 6c 65 20 36 34 2d 62 69 74 20 73 69 67 6e 65  ble 64-bit signe
03f0: 64 20 69 6e 74 65 67 65 72 73 2e 0a 2a 2f 0a 23  d integers..*/.#
0400: 20 64 65 66 69 6e 65 20 4c 41 52 47 45 53 54 5f   define LARGEST_
0410: 49 4e 54 36 34 20 20 28 30 78 66 66 66 66 66 66  INT64  (0xffffff
0420: 66 66 7c 28 28 28 69 36 34 29 30 78 37 66 66 66  ff|(((i64)0x7fff
0430: 66 66 66 66 29 3c 3c 33 32 29 29 0a 23 20 64 65  ffff)<<32)).# de
0440: 66 69 6e 65 20 53 4d 41 4c 4c 45 53 54 5f 49 4e  fine SMALLEST_IN
0450: 54 36 34 20 28 28 28 69 36 34 29 2d 31 29 20 2d  T64 (((i64)-1) -
0460: 20 4c 41 52 47 45 53 54 5f 49 4e 54 36 34 29 0a   LARGEST_INT64).
0470: 0a 23 65 6e 64 69 66 0a 0a 2f 2a 20 54 72 75 6e  .#endif../* Trun
0480: 63 61 74 65 20 76 65 72 79 20 6c 6f 6e 67 20 74  cate very long t
0490: 6f 6b 65 6e 73 20 74 6f 20 74 68 69 73 20 6d 61  okens to this ma
04a0: 6e 79 20 62 79 74 65 73 2e 20 48 61 72 64 20 6c  ny bytes. Hard l
04b0: 69 6d 69 74 20 69 73 20 0a 2a 2a 20 28 36 35 35  imit is .** (655
04c0: 33 36 2d 31 2d 31 2d 34 2d 39 29 3d 3d 36 35 35  36-1-1-4-9)==655
04d0: 32 31 20 62 79 74 65 73 2e 20 54 68 65 20 6c 69  21 bytes. The li
04e0: 6d 69 74 69 6e 67 20 66 61 63 74 6f 72 20 69 73  miting factor is
04f0: 20 74 68 65 20 31 36 2d 62 69 74 20 6f 66 66 73   the 16-bit offs
0500: 65 74 0a 2a 2a 20 66 69 65 6c 64 20 74 68 61 74  et.** field that
0510: 20 6f 63 63 75 72 73 20 61 74 20 74 68 65 20 73   occurs at the s
0520: 74 61 72 74 20 6f 66 20 65 61 63 68 20 6c 65 61  tart of each lea
0530: 66 20 70 61 67 65 20 28 73 65 65 20 66 74 73 35  f page (see fts5
0540: 5f 69 6e 64 65 78 2e 63 29 2e 20 2a 2f 0a 23 64  _index.c). */.#d
0550: 65 66 69 6e 65 20 46 54 53 35 5f 4d 41 58 5f 54  efine FTS5_MAX_T
0560: 4f 4b 45 4e 5f 53 49 5a 45 20 33 32 37 36 38 0a  OKEN_SIZE 32768.
0570: 0a 2f 2a 0a 2a 2a 20 4d 61 78 69 6d 75 6d 20 6e  ./*.** Maximum n
0580: 75 6d 62 65 72 20 6f 66 20 70 72 65 66 69 78 20  umber of prefix 
0590: 69 6e 64 65 78 65 73 20 6f 6e 20 73 69 6e 67 6c  indexes on singl
05a0: 65 20 46 54 53 35 20 74 61 62 6c 65 2e 20 54 68  e FTS5 table. Th
05b0: 69 73 20 6d 75 73 74 20 62 65 0a 2a 2a 20 6c 65  is must be.** le
05c0: 73 73 20 74 68 61 6e 20 33 32 2e 20 49 66 20 69  ss than 32. If i
05d0: 74 20 69 73 20 73 65 74 20 74 6f 20 61 6e 79 74  t is set to anyt
05e0: 68 69 6e 67 20 6c 61 72 67 65 20 74 68 61 6e 20  hing large than 
05f0: 74 68 61 74 2c 20 61 6e 20 23 65 72 72 6f 72 0a  that, an #error.
0600: 2a 2a 20 64 69 72 65 63 74 69 76 65 20 69 6e 20  ** directive in 
0610: 66 74 73 35 5f 69 6e 64 65 78 2e 63 20 77 69 6c  fts5_index.c wil
0620: 6c 20 63 61 75 73 65 20 74 68 65 20 62 75 69 6c  l cause the buil
0630: 64 20 74 6f 20 66 61 69 6c 2e 0a 2a 2f 0a 23 64  d to fail..*/.#d
0640: 65 66 69 6e 65 20 46 54 53 35 5f 4d 41 58 5f 50  efine FTS5_MAX_P
0650: 52 45 46 49 58 5f 49 4e 44 45 58 45 53 20 33 31  REFIX_INDEXES 31
0660: 0a 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 44  ..#define FTS5_D
0670: 45 46 41 55 4c 54 5f 4e 45 41 52 44 49 53 54 20  EFAULT_NEARDIST 
0680: 31 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f  10.#define FTS5_
0690: 44 45 46 41 55 4c 54 5f 52 41 4e 4b 20 20 20 20  DEFAULT_RANK    
06a0: 20 22 62 6d 32 35 22 0a 0a 2f 2a 20 4e 61 6d 65   "bm25"../* Name
06b0: 20 6f 66 20 72 61 6e 6b 20 61 6e 64 20 72 6f 77   of rank and row
06c0: 69 64 20 63 6f 6c 75 6d 6e 73 20 2a 2f 0a 23 64  id columns */.#d
06d0: 65 66 69 6e 65 20 46 54 53 35 5f 52 41 4e 4b 5f  efine FTS5_RANK_
06e0: 4e 41 4d 45 20 22 72 61 6e 6b 22 0a 23 64 65 66  NAME "rank".#def
06f0: 69 6e 65 20 46 54 53 35 5f 52 4f 57 49 44 5f 4e  ine FTS5_ROWID_N
0700: 41 4d 45 20 22 72 6f 77 69 64 22 0a 0a 23 69 66  AME "rowid"..#if
0710: 64 65 66 20 53 51 4c 49 54 45 5f 44 45 42 55 47  def SQLITE_DEBUG
0720: 0a 23 20 64 65 66 69 6e 65 20 46 54 53 35 5f 43  .# define FTS5_C
0730: 4f 52 52 55 50 54 20 73 71 6c 69 74 65 33 46 74  ORRUPT sqlite3Ft
0740: 73 35 43 6f 72 72 75 70 74 28 29 0a 69 6e 74 20  s5Corrupt().int 
0750: 73 71 6c 69 74 65 33 46 74 73 35 43 6f 72 72 75  sqlite3Fts5Corru
0760: 70 74 28 76 6f 69 64 29 3b 0a 23 65 6c 73 65 0a  pt(void);.#else.
0770: 23 20 64 65 66 69 6e 65 20 46 54 53 35 5f 43 4f  # define FTS5_CO
0780: 52 52 55 50 54 20 53 51 4c 49 54 45 5f 43 4f 52  RRUPT SQLITE_COR
0790: 52 55 50 54 5f 56 54 41 42 0a 23 65 6e 64 69 66  RUPT_VTAB.#endif
07a0: 0a 0a 2f 2a 0a 2a 2a 20 54 68 65 20 61 73 73 65  ../*.** The asse
07b0: 72 74 5f 6e 63 28 29 20 6d 61 63 72 6f 20 69 73  rt_nc() macro is
07c0: 20 73 69 6d 69 6c 61 72 20 74 6f 20 74 68 65 20   similar to the 
07d0: 61 73 73 65 72 74 28 29 20 6d 61 63 72 6f 2c 20  assert() macro, 
07e0: 65 78 63 65 70 74 20 74 68 61 74 20 69 74 0a 2a  except that it.*
07f0: 2a 20 69 73 20 75 73 65 64 20 66 6f 72 20 61 73  * is used for as
0800: 73 65 72 74 28 29 20 63 6f 6e 64 69 74 69 6f 6e  sert() condition
0810: 73 20 74 68 61 74 20 61 72 65 20 74 72 75 65 20  s that are true 
0820: 6f 6e 6c 79 20 69 66 20 69 74 20 63 61 6e 20 62  only if it can b
0830: 65 20 0a 2a 2a 20 67 75 72 61 6e 74 65 65 64 20  e .** guranteed 
0840: 74 68 61 74 20 74 68 65 20 64 61 74 61 62 61 73  that the databas
0850: 65 20 69 73 20 6e 6f 74 20 63 6f 72 72 75 70 74  e is not corrupt
0860: 2e 0a 2a 2f 0a 23 69 66 64 65 66 20 53 51 4c 49  ..*/.#ifdef SQLI
0870: 54 45 5f 44 45 42 55 47 0a 65 78 74 65 72 6e 20  TE_DEBUG.extern 
0880: 69 6e 74 20 73 71 6c 69 74 65 33 5f 66 74 73 35  int sqlite3_fts5
0890: 5f 6d 61 79 5f 62 65 5f 63 6f 72 72 75 70 74 3b  _may_be_corrupt;
08a0: 0a 23 20 64 65 66 69 6e 65 20 61 73 73 65 72 74  .# define assert
08b0: 5f 6e 63 28 78 29 20 61 73 73 65 72 74 28 73 71  _nc(x) assert(sq
08c0: 6c 69 74 65 33 5f 66 74 73 35 5f 6d 61 79 5f 62  lite3_fts5_may_b
08d0: 65 5f 63 6f 72 72 75 70 74 20 7c 7c 20 28 78 29  e_corrupt || (x)
08e0: 29 0a 23 65 6c 73 65 0a 23 20 64 65 66 69 6e 65  ).#else.# define
08f0: 20 61 73 73 65 72 74 5f 6e 63 28 78 29 20 61 73   assert_nc(x) as
0900: 73 65 72 74 28 78 29 0a 23 65 6e 64 69 66 0a 0a  sert(x).#endif..
0910: 2f 2a 20 4d 61 72 6b 20 61 20 66 75 6e 63 74 69  /* Mark a functi
0920: 6f 6e 20 70 61 72 61 6d 65 74 65 72 20 61 73 20  on parameter as 
0930: 75 6e 75 73 65 64 2c 20 74 6f 20 73 75 70 70 72  unused, to suppr
0940: 65 73 73 20 6e 75 69 73 61 6e 63 65 20 63 6f 6d  ess nuisance com
0950: 70 69 6c 65 72 0a 2a 2a 20 77 61 72 6e 69 6e 67  piler.** warning
0960: 73 2e 20 2a 2f 0a 23 69 66 6e 64 65 66 20 55 4e  s. */.#ifndef UN
0970: 55 53 45 44 5f 50 41 52 41 4d 0a 23 20 64 65 66  USED_PARAM.# def
0980: 69 6e 65 20 55 4e 55 53 45 44 5f 50 41 52 41 4d  ine UNUSED_PARAM
0990: 28 58 29 20 20 28 76 6f 69 64 29 28 58 29 0a 23  (X)  (void)(X).#
09a0: 65 6e 64 69 66 0a 0a 23 69 66 6e 64 65 66 20 55  endif..#ifndef U
09b0: 4e 55 53 45 44 5f 50 41 52 41 4d 32 0a 23 20 64  NUSED_PARAM2.# d
09c0: 65 66 69 6e 65 20 55 4e 55 53 45 44 5f 50 41 52  efine UNUSED_PAR
09d0: 41 4d 32 28 58 2c 20 59 29 20 20 28 76 6f 69 64  AM2(X, Y)  (void
09e0: 29 28 58 29 2c 20 28 76 6f 69 64 29 28 59 29 0a  )(X), (void)(Y).
09f0: 23 65 6e 64 69 66 0a 0a 74 79 70 65 64 65 66 20  #endif..typedef 
0a00: 73 74 72 75 63 74 20 46 74 73 35 47 6c 6f 62 61  struct Fts5Globa
0a10: 6c 20 46 74 73 35 47 6c 6f 62 61 6c 3b 0a 74 79  l Fts5Global;.ty
0a20: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
0a30: 35 43 6f 6c 73 65 74 20 46 74 73 35 43 6f 6c 73  5Colset Fts5Cols
0a40: 65 74 3b 0a 0a 2f 2a 20 49 66 20 61 20 4e 45 41  et;../* If a NEA
0a50: 52 28 29 20 63 6c 75 6d 70 20 6f 72 20 70 68 72  R() clump or phr
0a60: 61 73 65 20 6d 61 79 20 6f 6e 6c 79 20 6d 61 74  ase may only mat
0a70: 63 68 20 61 20 73 70 65 63 69 66 69 63 20 73 65  ch a specific se
0a80: 74 20 6f 66 20 63 6f 6c 75 6d 6e 73 2c 20 0a 2a  t of columns, .*
0a90: 2a 20 74 68 65 6e 20 61 6e 20 6f 62 6a 65 63 74  * then an object
0aa0: 20 6f 66 20 74 68 65 20 66 6f 6c 6c 6f 77 69 6e   of the followin
0ab0: 67 20 74 79 70 65 20 69 73 20 75 73 65 64 20 74  g type is used t
0ac0: 6f 20 72 65 63 6f 72 64 20 74 68 65 20 73 65 74  o record the set
0ad0: 20 6f 66 20 63 6f 6c 75 6d 6e 73 2e 0a 2a 2a 20   of columns..** 
0ae0: 45 61 63 68 20 65 6e 74 72 79 20 69 6e 20 74 68  Each entry in th
0af0: 65 20 61 69 43 6f 6c 5b 5d 20 61 72 72 61 79 20  e aiCol[] array 
0b00: 69 73 20 61 20 63 6f 6c 75 6d 6e 20 74 68 61 74  is a column that
0b10: 20 6d 61 79 20 62 65 20 6d 61 74 63 68 65 64 2e   may be matched.
0b20: 0a 2a 2a 0a 2a 2a 20 54 68 69 73 20 6f 62 6a 65  .**.** This obje
0b30: 63 74 20 69 73 20 75 73 65 64 20 62 79 20 66 74  ct is used by ft
0b40: 73 35 5f 65 78 70 72 2e 63 20 61 6e 64 20 66 74  s5_expr.c and ft
0b50: 73 35 5f 69 6e 64 65 78 2e 63 2e 0a 2a 2f 0a 73  s5_index.c..*/.s
0b60: 74 72 75 63 74 20 46 74 73 35 43 6f 6c 73 65 74  truct Fts5Colset
0b70: 20 7b 0a 20 20 69 6e 74 20 6e 43 6f 6c 3b 0a 20   {.  int nCol;. 
0b80: 20 69 6e 74 20 61 69 43 6f 6c 5b 31 5d 3b 0a 7d   int aiCol[1];.}
0b90: 3b 0a 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ;..../**********
0ba0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0bd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
0be0: 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f  .** Interface to
0bf0: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 63 6f   code in fts5_co
0c00: 6e 66 69 67 2e 63 2e 20 66 74 73 35 5f 63 6f 6e  nfig.c. fts5_con
0c10: 66 69 67 2e 63 20 63 6f 6e 74 61 69 6e 73 20 63  fig.c contains c
0c20: 6f 6e 74 61 69 6e 73 20 63 6f 64 65 0a 2a 2a 20  ontains code.** 
0c30: 74 6f 20 70 61 72 73 65 20 74 68 65 20 61 72 67  to parse the arg
0c40: 75 6d 65 6e 74 73 20 70 61 73 73 65 64 20 74 6f  uments passed to
0c50: 20 74 68 65 20 43 52 45 41 54 45 20 56 49 52 54   the CREATE VIRT
0c60: 55 41 4c 20 54 41 42 4c 45 20 73 74 61 74 65 6d  UAL TABLE statem
0c70: 65 6e 74 2e 0a 2a 2f 0a 0a 74 79 70 65 64 65 66  ent..*/..typedef
0c80: 20 73 74 72 75 63 74 20 46 74 73 35 43 6f 6e 66   struct Fts5Conf
0c90: 69 67 20 46 74 73 35 43 6f 6e 66 69 67 3b 0a 0a  ig Fts5Config;..
0ca0: 2f 2a 0a 2a 2a 20 41 6e 20 69 6e 73 74 61 6e 63  /*.** An instanc
0cb0: 65 20 6f 66 20 74 68 65 20 66 6f 6c 6c 6f 77 69  e of the followi
0cc0: 6e 67 20 73 74 72 75 63 74 75 72 65 20 65 6e 63  ng structure enc
0cd0: 6f 64 65 73 20 61 6c 6c 20 69 6e 66 6f 72 6d 61  odes all informa
0ce0: 74 69 6f 6e 20 74 68 61 74 20 63 61 6e 0a 2a 2a  tion that can.**
0cf0: 20 62 65 20 67 6c 65 61 6e 65 64 20 66 72 6f 6d   be gleaned from
0d00: 20 74 68 65 20 43 52 45 41 54 45 20 56 49 52 54   the CREATE VIRT
0d10: 55 41 4c 20 54 41 42 4c 45 20 73 74 61 74 65 6d  UAL TABLE statem
0d20: 65 6e 74 2e 0a 2a 2a 0a 2a 2a 20 41 6e 64 20 61  ent..**.** And a
0d30: 6c 6c 20 69 6e 66 6f 72 6d 61 74 69 6f 6e 20 6c  ll information l
0d40: 6f 61 64 65 64 20 66 72 6f 6d 20 74 68 65 20 25  oaded from the %
0d50: 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65 2e 0a 2a  _config table..*
0d60: 2a 0a 2a 2a 20 6e 41 75 74 6f 6d 65 72 67 65 3a  *.** nAutomerge:
0d70: 0a 2a 2a 20 20 20 54 68 65 20 6d 69 6e 69 6d 75  .**   The minimu
0d80: 6d 20 6e 75 6d 62 65 72 20 6f 66 20 73 65 67 6d  m number of segm
0d90: 65 6e 74 73 20 74 68 61 74 20 61 6e 20 61 75 74  ents that an aut
0da0: 6f 2d 6d 65 72 67 65 20 6f 70 65 72 61 74 69 6f  o-merge operatio
0db0: 6e 20 73 68 6f 75 6c 64 0a 2a 2a 20 20 20 61 74  n should.**   at
0dc0: 74 65 6d 70 74 20 74 6f 20 6d 65 72 67 65 20 74  tempt to merge t
0dd0: 6f 67 65 74 68 65 72 2e 20 41 20 76 61 6c 75 65  ogether. A value
0de0: 20 6f 66 20 31 20 73 65 74 73 20 74 68 65 20 6f   of 1 sets the o
0df0: 62 6a 65 63 74 20 74 6f 20 75 73 65 20 74 68 65  bject to use the
0e00: 20 0a 2a 2a 20 20 20 63 6f 6d 70 69 6c 65 20 74   .**   compile t
0e10: 69 6d 65 20 64 65 66 61 75 6c 74 2e 20 5a 65 72  ime default. Zer
0e20: 6f 20 64 69 73 61 62 6c 65 73 20 61 75 74 6f 2d  o disables auto-
0e30: 6d 65 72 67 65 20 61 6c 74 6f 67 65 74 68 65 72  merge altogether
0e40: 2e 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74 65 6e 74  ..**.** zContent
0e50: 3a 0a 2a 2a 0a 2a 2a 20 7a 43 6f 6e 74 65 6e 74  :.**.** zContent
0e60: 52 6f 77 69 64 3a 0a 2a 2a 20 20 20 54 68 65 20  Rowid:.**   The 
0e70: 76 61 6c 75 65 20 6f 66 20 74 68 65 20 63 6f 6e  value of the con
0e80: 74 65 6e 74 5f 72 6f 77 69 64 3d 20 6f 70 74 69  tent_rowid= opti
0e90: 6f 6e 2c 20 69 66 20 6f 6e 65 20 77 61 73 20 73  on, if one was s
0ea0: 70 65 63 69 66 69 65 64 2e 20 4f 72 20 0a 2a 2a  pecified. Or .**
0eb0: 20 20 20 74 68 65 20 73 74 72 69 6e 67 20 22 72     the string "r
0ec0: 6f 77 69 64 22 20 6f 74 68 65 72 77 69 73 65 2e  owid" otherwise.
0ed0: 20 54 68 69 73 20 74 65 78 74 20 69 73 20 6e 6f   This text is no
0ee0: 74 20 71 75 6f 74 65 64 20 2d 20 69 66 20 69 74  t quoted - if it
0ef0: 20 69 73 0a 2a 2a 20 20 20 75 73 65 64 20 61 73   is.**   used as
0f00: 20 70 61 72 74 20 6f 66 20 61 6e 20 53 51 4c 20   part of an SQL 
0f10: 73 74 61 74 65 6d 65 6e 74 20 69 74 20 6e 65 65  statement it nee
0f20: 64 73 20 74 6f 20 62 65 20 71 75 6f 74 65 64 20  ds to be quoted 
0f30: 61 70 70 72 6f 70 72 69 61 74 65 6c 79 2e 0a 2a  appropriately..*
0f40: 2a 0a 2a 2a 20 7a 43 6f 6e 74 65 6e 74 45 78 70  *.** zContentExp
0f50: 72 6c 69 73 74 3a 0a 2a 2a 0a 2a 2a 20 70 7a 45  rlist:.**.** pzE
0f60: 72 72 6d 73 67 3a 0a 2a 2a 20 20 20 54 68 69 73  rrmsg:.**   This
0f70: 20 65 78 69 73 74 73 20 69 6e 20 6f 72 64 65 72   exists in order
0f80: 20 74 6f 20 61 6c 6c 6f 77 20 74 68 65 20 66 74   to allow the ft
0f90: 73 35 5f 69 6e 64 65 78 2e 63 20 6d 6f 64 75 6c  s5_index.c modul
0fa0: 65 20 74 6f 20 72 65 74 75 72 6e 20 61 20 0a 2a  e to return a .*
0fb0: 2a 20 20 20 64 65 63 65 6e 74 20 65 72 72 6f 72  *   decent error
0fc0: 20 6d 65 73 73 61 67 65 20 69 66 20 69 74 20 65   message if it e
0fd0: 6e 63 6f 75 6e 74 65 72 73 20 61 20 66 69 6c 65  ncounters a file
0fe0: 2d 66 6f 72 6d 61 74 20 76 65 72 73 69 6f 6e 20  -format version 
0ff0: 69 74 20 64 6f 65 73 0a 2a 2a 20 20 20 6e 6f 74  it does.**   not
1000: 20 75 6e 64 65 72 73 74 61 6e 64 2e 0a 2a 2a 0a   understand..**.
1010: 2a 2a 20 62 43 6f 6c 75 6d 6e 73 69 7a 65 3a 0a  ** bColumnsize:.
1020: 2a 2a 20 20 20 54 72 75 65 20 69 66 20 74 68 65  **   True if the
1030: 20 25 5f 64 6f 63 73 69 7a 65 20 74 61 62 6c 65   %_docsize table
1040: 20 69 73 20 63 72 65 61 74 65 64 2e 0a 2a 2a 0a   is created..**.
1050: 2a 2a 20 62 50 72 65 66 69 78 49 6e 64 65 78 3a  ** bPrefixIndex:
1060: 0a 2a 2a 20 20 20 54 68 69 73 20 69 73 20 6f 6e  .**   This is on
1070: 6c 79 20 75 73 65 64 20 66 6f 72 20 64 65 62 75  ly used for debu
1080: 67 67 69 6e 67 2e 20 49 66 20 73 65 74 20 74 6f  gging. If set to
1090: 20 66 61 6c 73 65 2c 20 61 6e 79 20 70 72 65 66   false, any pref
10a0: 69 78 20 69 6e 64 65 78 65 73 0a 2a 2a 20 20 20  ix indexes.**   
10b0: 61 72 65 20 69 67 6e 6f 72 65 64 2e 20 54 68 69  are ignored. Thi
10c0: 73 20 76 61 6c 75 65 20 69 73 20 63 6f 6e 66 69  s value is confi
10d0: 67 75 72 65 64 20 75 73 69 6e 67 3a 0a 2a 2a 0a  gured using:.**.
10e0: 2a 2a 20 20 20 20 20 20 20 49 4e 53 45 52 54 20  **       INSERT 
10f0: 49 4e 54 4f 20 74 62 6c 28 74 62 6c 2c 20 72 61  INTO tbl(tbl, ra
1100: 6e 6b 29 20 56 41 4c 55 45 53 28 27 70 72 65 66  nk) VALUES('pref
1110: 69 78 2d 69 6e 64 65 78 27 2c 20 24 62 50 72 65  ix-index', $bPre
1120: 66 69 78 49 6e 64 65 78 29 3b 0a 2a 2a 0a 2a 2f  fixIndex);.**.*/
1130: 0a 73 74 72 75 63 74 20 46 74 73 35 43 6f 6e 66  .struct Fts5Conf
1140: 69 67 20 7b 0a 20 20 73 71 6c 69 74 65 33 20 2a  ig {.  sqlite3 *
1150: 64 62 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  db;             
1160: 20 20 20 20 20 20 20 2f 2a 20 44 61 74 61 62 61         /* Databa
1170: 73 65 20 68 61 6e 64 6c 65 20 2a 2f 0a 20 20 63  se handle */.  c
1180: 68 61 72 20 2a 7a 44 62 3b 20 20 20 20 20 20 20  har *zDb;       
1190: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f                 /
11a0: 2a 20 44 61 74 61 62 61 73 65 20 68 6f 6c 64 69  * Database holdi
11b0: 6e 67 20 46 54 53 20 69 6e 64 65 78 20 28 65 2e  ng FTS index (e.
11c0: 67 2e 20 22 6d 61 69 6e 22 29 20 2a 2f 0a 20 20  g. "main") */.  
11d0: 63 68 61 72 20 2a 7a 4e 61 6d 65 3b 20 20 20 20  char *zName;    
11e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
11f0: 2f 2a 20 4e 61 6d 65 20 6f 66 20 46 54 53 20 69  /* Name of FTS i
1200: 6e 64 65 78 20 2a 2f 0a 20 20 69 6e 74 20 6e 43  ndex */.  int nC
1210: 6f 6c 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  ol;             
1220: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4e 75 6d            /* Num
1230: 62 65 72 20 6f 66 20 63 6f 6c 75 6d 6e 73 20 2a  ber of columns *
1240: 2f 0a 20 20 63 68 61 72 20 2a 2a 61 7a 43 6f 6c  /.  char **azCol
1250: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1260: 20 20 20 20 2f 2a 20 43 6f 6c 75 6d 6e 20 6e 61      /* Column na
1270: 6d 65 73 20 2a 2f 0a 20 20 75 38 20 2a 61 62 55  mes */.  u8 *abU
1280: 6e 69 6e 64 65 78 65 64 3b 20 20 20 20 20 20 20  nindexed;       
1290: 20 20 20 20 20 20 20 20 20 2f 2a 20 54 72 75 65           /* True
12a0: 20 66 6f 72 20 75 6e 69 6e 64 65 78 65 64 20 63   for unindexed c
12b0: 6f 6c 75 6d 6e 73 20 2a 2f 0a 20 20 69 6e 74 20  olumns */.  int 
12c0: 6e 50 72 65 66 69 78 3b 20 20 20 20 20 20 20 20  nPrefix;        
12d0: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4e              /* N
12e0: 75 6d 62 65 72 20 6f 66 20 70 72 65 66 69 78 20  umber of prefix 
12f0: 69 6e 64 65 78 65 73 20 2a 2f 0a 20 20 69 6e 74  indexes */.  int
1300: 20 2a 61 50 72 65 66 69 78 3b 20 20 20 20 20 20   *aPrefix;      
1310: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
1320: 53 69 7a 65 73 20 69 6e 20 62 79 74 65 73 20 6f  Sizes in bytes o
1330: 66 20 6e 50 72 65 66 69 78 20 70 72 65 66 69 78  f nPrefix prefix
1340: 20 69 6e 64 65 78 65 73 20 2a 2f 0a 20 20 69 6e   indexes */.  in
1350: 74 20 65 43 6f 6e 74 65 6e 74 3b 20 20 20 20 20  t eContent;     
1360: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
1370: 20 41 6e 20 46 54 53 35 5f 43 4f 4e 54 45 4e 54   An FTS5_CONTENT
1380: 20 76 61 6c 75 65 20 2a 2f 0a 20 20 63 68 61 72   value */.  char
1390: 20 2a 7a 43 6f 6e 74 65 6e 74 3b 20 20 20 20 20   *zContent;     
13a0: 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 63              /* c
13b0: 6f 6e 74 65 6e 74 20 74 61 62 6c 65 20 2a 2f 20  ontent table */ 
13c0: 0a 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74 65 6e  .  char *zConten
13d0: 74 52 6f 77 69 64 3b 20 20 20 20 20 20 20 20 20  tRowid;         
13e0: 20 20 20 2f 2a 20 22 63 6f 6e 74 65 6e 74 5f 72     /* "content_r
13f0: 6f 77 69 64 3d 22 20 6f 70 74 69 6f 6e 20 76 61  owid=" option va
1400: 6c 75 65 20 2a 2f 20 0a 20 20 69 6e 74 20 62 43  lue */ .  int bC
1410: 6f 6c 75 6d 6e 73 69 7a 65 3b 20 20 20 20 20 20  olumnsize;      
1420: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 22 63 6f            /* "co
1430: 6c 75 6d 6e 73 69 7a 65 3d 22 20 6f 70 74 69 6f  lumnsize=" optio
1440: 6e 20 76 61 6c 75 65 20 28 64 66 6c 74 3d 3d 31  n value (dflt==1
1450: 29 20 2a 2f 0a 20 20 69 6e 74 20 65 44 65 74 61  ) */.  int eDeta
1460: 69 6c 3b 20 20 20 20 20 20 20 20 20 20 20 20 20  il;             
1470: 20 20 20 20 20 20 20 2f 2a 20 46 54 53 35 5f 44         /* FTS5_D
1480: 45 54 41 49 4c 5f 58 58 58 20 76 61 6c 75 65 20  ETAIL_XXX value 
1490: 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 43 6f 6e 74  */.  char *zCont
14a0: 65 6e 74 45 78 70 72 6c 69 73 74 3b 0a 20 20 46  entExprlist;.  F
14b0: 74 73 35 54 6f 6b 65 6e 69 7a 65 72 20 2a 70 54  ts5Tokenizer *pT
14c0: 6f 6b 3b 0a 20 20 66 74 73 35 5f 74 6f 6b 65 6e  ok;.  fts5_token
14d0: 69 7a 65 72 20 2a 70 54 6f 6b 41 70 69 3b 0a 0a  izer *pTokApi;..
14e0: 20 20 2f 2a 20 56 61 6c 75 65 73 20 6c 6f 61 64    /* Values load
14f0: 65 64 20 66 72 6f 6d 20 74 68 65 20 25 5f 63 6f  ed from the %_co
1500: 6e 66 69 67 20 74 61 62 6c 65 20 2a 2f 0a 20 20  nfig table */.  
1510: 69 6e 74 20 69 43 6f 6f 6b 69 65 3b 20 20 20 20  int iCookie;    
1520: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1530: 2f 2a 20 49 6e 63 72 65 6d 65 6e 74 65 64 20 77  /* Incremented w
1540: 68 65 6e 20 25 5f 63 6f 6e 66 69 67 20 69 73 20  hen %_config is 
1550: 6d 6f 64 69 66 69 65 64 20 2a 2f 0a 20 20 69 6e  modified */.  in
1560: 74 20 70 67 73 7a 3b 20 20 20 20 20 20 20 20 20  t pgsz;         
1570: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
1580: 20 41 70 70 72 6f 78 69 6d 61 74 65 20 70 61 67   Approximate pag
1590: 65 20 73 69 7a 65 20 75 73 65 64 20 69 6e 20 25  e size used in %
15a0: 5f 64 61 74 61 20 2a 2f 0a 20 20 69 6e 74 20 6e  _data */.  int n
15b0: 41 75 74 6f 6d 65 72 67 65 3b 20 20 20 20 20 20  Automerge;      
15c0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 27 61             /* 'a
15d0: 75 74 6f 6d 65 72 67 65 27 20 73 65 74 74 69 6e  utomerge' settin
15e0: 67 20 2a 2f 0a 20 20 69 6e 74 20 6e 43 72 69 73  g */.  int nCris
15f0: 69 73 4d 65 72 67 65 3b 20 20 20 20 20 20 20 20  isMerge;        
1600: 20 20 20 20 20 20 20 2f 2a 20 4d 61 78 69 6d 75         /* Maximu
1610: 6d 20 61 6c 6c 6f 77 65 64 20 73 65 67 6d 65 6e  m allowed segmen
1620: 74 73 20 70 65 72 20 6c 65 76 65 6c 20 2a 2f 0a  ts per level */.
1630: 20 20 69 6e 74 20 6e 55 73 65 72 6d 65 72 67 65    int nUsermerge
1640: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
1650: 20 20 2f 2a 20 27 75 73 65 72 6d 65 72 67 65 27    /* 'usermerge'
1660: 20 73 65 74 74 69 6e 67 20 2a 2f 0a 20 20 69 6e   setting */.  in
1670: 74 20 6e 48 61 73 68 53 69 7a 65 3b 20 20 20 20  t nHashSize;    
1680: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
1690: 20 42 79 74 65 73 20 6f 66 20 6d 65 6d 6f 72 79   Bytes of memory
16a0: 20 66 6f 72 20 69 6e 2d 6d 65 6d 6f 72 79 20 68   for in-memory h
16b0: 61 73 68 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a  ash */.  char *z
16c0: 52 61 6e 6b 3b 20 20 20 20 20 20 20 20 20 20 20  Rank;           
16d0: 20 20 20 20 20 20 20 20 20 2f 2a 20 4e 61 6d 65           /* Name
16e0: 20 6f 66 20 72 61 6e 6b 20 66 75 6e 63 74 69 6f   of rank functio
16f0: 6e 20 2a 2f 0a 20 20 63 68 61 72 20 2a 7a 52 61  n */.  char *zRa
1700: 6e 6b 41 72 67 73 3b 20 20 20 20 20 20 20 20 20  nkArgs;         
1710: 20 20 20 20 20 20 20 2f 2a 20 41 72 67 75 6d 65         /* Argume
1720: 6e 74 73 20 74 6f 20 72 61 6e 6b 20 66 75 6e 63  nts to rank func
1730: 74 69 6f 6e 20 2a 2f 0a 0a 20 20 2f 2a 20 49 66  tion */..  /* If
1740: 20 6e 6f 6e 2d 4e 55 4c 4c 2c 20 70 6f 69 6e 74   non-NULL, point
1750: 73 20 74 6f 20 73 71 6c 69 74 65 33 5f 76 74 61  s to sqlite3_vta
1760: 62 2e 62 61 73 65 2e 7a 45 72 72 6d 73 67 2e 20  b.base.zErrmsg. 
1770: 4f 66 74 65 6e 20 4e 55 4c 4c 2e 20 2a 2f 0a 20  Often NULL. */. 
1780: 20 63 68 61 72 20 2a 2a 70 7a 45 72 72 6d 73 67   char **pzErrmsg
1790: 3b 0a 0a 23 69 66 64 65 66 20 53 51 4c 49 54 45  ;..#ifdef SQLITE
17a0: 5f 44 45 42 55 47 0a 20 20 69 6e 74 20 62 50 72  _DEBUG.  int bPr
17b0: 65 66 69 78 49 6e 64 65 78 3b 20 20 20 20 20 20  efixIndex;      
17c0: 20 20 20 20 20 20 20 20 20 2f 2a 20 54 72 75 65           /* True
17d0: 20 74 6f 20 75 73 65 20 70 72 65 66 69 78 2d 69   to use prefix-i
17e0: 6e 64 65 78 65 73 20 2a 2f 0a 23 65 6e 64 69 66  ndexes */.#endif
17f0: 0a 7d 3b 0a 0a 2f 2a 20 43 75 72 72 65 6e 74 20  .};../* Current 
1800: 65 78 70 65 63 74 65 64 20 76 61 6c 75 65 20 6f  expected value o
1810: 66 20 25 5f 63 6f 6e 66 69 67 20 74 61 62 6c 65  f %_config table
1820: 20 27 76 65 72 73 69 6f 6e 27 20 66 69 65 6c 64   'version' field
1830: 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53 35   */.#define FTS5
1840: 5f 43 55 52 52 45 4e 54 5f 56 45 52 53 49 4f 4e  _CURRENT_VERSION
1850: 20 34 0a 0a 23 64 65 66 69 6e 65 20 46 54 53 35   4..#define FTS5
1860: 5f 43 4f 4e 54 45 4e 54 5f 4e 4f 52 4d 41 4c 20  _CONTENT_NORMAL 
1870: 20 20 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35    0.#define FTS5
1880: 5f 43 4f 4e 54 45 4e 54 5f 4e 4f 4e 45 20 20 20  _CONTENT_NONE   
1890: 20 20 31 0a 23 64 65 66 69 6e 65 20 46 54 53 35    1.#define FTS5
18a0: 5f 43 4f 4e 54 45 4e 54 5f 45 58 54 45 52 4e 41  _CONTENT_EXTERNA
18b0: 4c 20 32 0a 0a 23 64 65 66 69 6e 65 20 46 54 53  L 2..#define FTS
18c0: 35 5f 44 45 54 41 49 4c 5f 46 55 4c 4c 20 20 20  5_DETAIL_FULL   
18d0: 20 30 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f   0.#define FTS5_
18e0: 44 45 54 41 49 4c 5f 4e 4f 4e 45 20 20 20 20 31  DETAIL_NONE    1
18f0: 0a 23 64 65 66 69 6e 65 20 46 54 53 35 5f 44 45  .#define FTS5_DE
1900: 54 41 49 4c 5f 43 4f 4c 55 4d 4e 53 20 32 0a 0a  TAIL_COLUMNS 2..
1910: 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ..int sqlite3Fts
1920: 35 43 6f 6e 66 69 67 50 61 72 73 65 28 0a 20 20  5ConfigParse(.  
1930: 20 20 46 74 73 35 47 6c 6f 62 61 6c 2a 2c 20 73    Fts5Global*, s
1940: 71 6c 69 74 65 33 2a 2c 20 69 6e 74 2c 20 63 6f  qlite3*, int, co
1950: 6e 73 74 20 63 68 61 72 20 2a 2a 2c 20 46 74 73  nst char **, Fts
1960: 35 43 6f 6e 66 69 67 2a 2a 2c 20 63 68 61 72 2a  5Config**, char*
1970: 2a 0a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65  *.);.void sqlite
1980: 33 46 74 73 35 43 6f 6e 66 69 67 46 72 65 65 28  3Fts5ConfigFree(
1990: 46 74 73 35 43 6f 6e 66 69 67 2a 29 3b 0a 0a 69  Fts5Config*);..i
19a0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 43 6f  nt sqlite3Fts5Co
19b0: 6e 66 69 67 44 65 63 6c 61 72 65 56 74 61 62 28  nfigDeclareVtab(
19c0: 46 74 73 35 43 6f 6e 66 69 67 20 2a 70 43 6f 6e  Fts5Config *pCon
19d0: 66 69 67 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74  fig);..int sqlit
19e0: 65 33 46 74 73 35 54 6f 6b 65 6e 69 7a 65 28 0a  e3Fts5Tokenize(.
19f0: 20 20 46 74 73 35 43 6f 6e 66 69 67 20 2a 70 43    Fts5Config *pC
1a00: 6f 6e 66 69 67 2c 20 20 20 20 20 20 20 20 20 20  onfig,          
1a10: 20 20 2f 2a 20 46 54 53 35 20 43 6f 6e 66 69 67    /* FTS5 Config
1a20: 75 72 61 74 69 6f 6e 20 6f 62 6a 65 63 74 20 2a  uration object *
1a30: 2f 0a 20 20 69 6e 74 20 66 6c 61 67 73 2c 20 20  /.  int flags,  
1a40: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
1a50: 20 20 20 20 2f 2a 20 46 54 53 35 5f 54 4f 4b 45      /* FTS5_TOKE
1a60: 4e 49 5a 45 5f 2a 20 66 6c 61 67 73 20 2a 2f 0a  NIZE_* flags */.
1a70: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54    const char *pT
1a80: 65 78 74 2c 20 69 6e 74 20 6e 54 65 78 74 2c 20  ext, int nText, 
1a90: 20 20 2f 2a 20 54 65 78 74 20 74 6f 20 74 6f 6b    /* Text to tok
1aa0: 65 6e 69 7a 65 20 2a 2f 0a 20 20 76 6f 69 64 20  enize */.  void 
1ab0: 2a 70 43 74 78 2c 20 20 20 20 20 20 20 20 20 20  *pCtx,          
1ac0: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 43 6f             /* Co
1ad0: 6e 74 65 78 74 20 70 61 73 73 65 64 20 74 6f 20  ntext passed to 
1ae0: 78 54 6f 6b 65 6e 28 29 20 2a 2f 0a 20 20 69 6e  xToken() */.  in
1af0: 74 20 28 2a 78 54 6f 6b 65 6e 29 28 76 6f 69 64  t (*xToken)(void
1b00: 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73 74 20 63 68  *, int, const ch
1b10: 61 72 2a 2c 20 69 6e 74 2c 20 69 6e 74 2c 20 69  ar*, int, int, i
1b20: 6e 74 29 20 20 20 20 2f 2a 20 43 61 6c 6c 62 61  nt)    /* Callba
1b30: 63 6b 20 2a 2f 0a 29 3b 0a 0a 76 6f 69 64 20 73  ck */.);..void s
1b40: 71 6c 69 74 65 33 46 74 73 35 44 65 71 75 6f 74  qlite3Fts5Dequot
1b50: 65 28 63 68 61 72 20 2a 7a 29 3b 0a 0a 2f 2a 20  e(char *z);../* 
1b60: 4c 6f 61 64 20 74 68 65 20 63 6f 6e 74 65 6e 74  Load the content
1b70: 73 20 6f 66 20 74 68 65 20 25 5f 63 6f 6e 66 69  s of the %_confi
1b80: 67 20 74 61 62 6c 65 20 2a 2f 0a 69 6e 74 20 73  g table */.int s
1b90: 71 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 67  qlite3Fts5Config
1ba0: 4c 6f 61 64 28 46 74 73 35 43 6f 6e 66 69 67 2a  Load(Fts5Config*
1bb0: 2c 20 69 6e 74 29 3b 0a 0a 2f 2a 20 53 65 74 20  , int);../* Set 
1bc0: 74 68 65 20 76 61 6c 75 65 20 6f 66 20 61 20 73  the value of a s
1bd0: 69 6e 67 6c 65 20 63 6f 6e 66 69 67 20 61 74 74  ingle config att
1be0: 72 69 62 75 74 65 20 2a 2f 0a 69 6e 74 20 73 71  ribute */.int sq
1bf0: 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 67 53  lite3Fts5ConfigS
1c00: 65 74 56 61 6c 75 65 28 46 74 73 35 43 6f 6e 66  etValue(Fts5Conf
1c10: 69 67 2a 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a  ig*, const char*
1c20: 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75 65 2a  , sqlite3_value*
1c30: 2c 20 69 6e 74 2a 29 3b 0a 0a 69 6e 74 20 73 71  , int*);..int sq
1c40: 6c 69 74 65 33 46 74 73 35 43 6f 6e 66 69 67 50  lite3Fts5ConfigP
1c50: 61 72 73 65 52 61 6e 6b 28 63 6f 6e 73 74 20 63  arseRank(const c
1c60: 68 61 72 2a 2c 20 63 68 61 72 2a 2a 2c 20 63 68  har*, char**, ch
1c70: 61 72 2a 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  ar**);../*.** En
1c80: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
1c90: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 63  o code in fts5_c
1ca0: 6f 6e 66 69 67 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a  onfig.c..*******
1cb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1ce0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1cf0: 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a  ***/../*********
1d00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
1d40: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74  *.** Interface t
1d50: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 62  o code in fts5_b
1d60: 75 66 66 65 72 2e 63 2e 0a 2a 2f 0a 0a 2f 2a 0a  uffer.c..*/../*.
1d70: 2a 2a 20 42 75 66 66 65 72 20 6f 62 6a 65 63 74  ** Buffer object
1d80: 20 66 6f 72 20 74 68 65 20 69 6e 63 72 65 6d 65   for the increme
1d90: 6e 74 61 6c 20 62 75 69 6c 64 69 6e 67 20 6f 66  ntal building of
1da0: 20 73 74 72 69 6e 67 20 64 61 74 61 2e 0a 2a 2f   string data..*/
1db0: 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20  .typedef struct 
1dc0: 46 74 73 35 42 75 66 66 65 72 20 46 74 73 35 42  Fts5Buffer Fts5B
1dd0: 75 66 66 65 72 3b 0a 73 74 72 75 63 74 20 46 74  uffer;.struct Ft
1de0: 73 35 42 75 66 66 65 72 20 7b 0a 20 20 75 38 20  s5Buffer {.  u8 
1df0: 2a 70 3b 0a 20 20 69 6e 74 20 6e 3b 0a 20 20 69  *p;.  int n;.  i
1e00: 6e 74 20 6e 53 70 61 63 65 3b 0a 7d 3b 0a 0a 69  nt nSpace;.};..i
1e10: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  nt sqlite3Fts5Bu
1e20: 66 66 65 72 53 69 7a 65 28 69 6e 74 2a 2c 20 46  fferSize(int*, F
1e30: 74 73 35 42 75 66 66 65 72 2a 2c 20 75 33 32 29  ts5Buffer*, u32)
1e40: 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74  ;.void sqlite3Ft
1e50: 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 56 61  s5BufferAppendVa
1e60: 72 69 6e 74 28 69 6e 74 2a 2c 20 46 74 73 35 42  rint(int*, Fts5B
1e70: 75 66 66 65 72 2a 2c 20 69 36 34 29 3b 0a 76 6f  uffer*, i64);.vo
1e80: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  id sqlite3Fts5Bu
1e90: 66 66 65 72 41 70 70 65 6e 64 42 6c 6f 62 28 69  fferAppendBlob(i
1ea0: 6e 74 2a 2c 20 46 74 73 35 42 75 66 66 65 72 2a  nt*, Fts5Buffer*
1eb0: 2c 20 75 33 32 2c 20 63 6f 6e 73 74 20 75 38 2a  , u32, const u8*
1ec0: 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  );.void sqlite3F
1ed0: 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 53  ts5BufferAppendS
1ee0: 74 72 69 6e 67 28 69 6e 74 20 2a 2c 20 46 74 73  tring(int *, Fts
1ef0: 35 42 75 66 66 65 72 2a 2c 20 63 6f 6e 73 74 20  5Buffer*, const 
1f00: 63 68 61 72 2a 29 3b 0a 76 6f 69 64 20 73 71 6c  char*);.void sql
1f10: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 46 72  ite3Fts5BufferFr
1f20: 65 65 28 46 74 73 35 42 75 66 66 65 72 2a 29 3b  ee(Fts5Buffer*);
1f30: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
1f40: 35 42 75 66 66 65 72 5a 65 72 6f 28 46 74 73 35  5BufferZero(Fts5
1f50: 42 75 66 66 65 72 2a 29 3b 0a 76 6f 69 64 20 73  Buffer*);.void s
1f60: 71 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72  qlite3Fts5Buffer
1f70: 53 65 74 28 69 6e 74 2a 2c 20 46 74 73 35 42 75  Set(int*, Fts5Bu
1f80: 66 66 65 72 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73  ffer*, int, cons
1f90: 74 20 75 38 2a 29 3b 0a 76 6f 69 64 20 73 71 6c  t u8*);.void sql
1fa0: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70  ite3Fts5BufferAp
1fb0: 70 65 6e 64 50 72 69 6e 74 66 28 69 6e 74 20 2a  pendPrintf(int *
1fc0: 2c 20 46 74 73 35 42 75 66 66 65 72 2a 2c 20 63  , Fts5Buffer*, c
1fd0: 68 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 3b  har *zFmt, ...);
1fe0: 0a 0a 63 68 61 72 20 2a 73 71 6c 69 74 65 33 46  ..char *sqlite3F
1ff0: 74 73 35 4d 70 72 69 6e 74 66 28 69 6e 74 20 2a  ts5Mprintf(int *
2000: 70 52 63 2c 20 63 6f 6e 73 74 20 63 68 61 72 20  pRc, const char 
2010: 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 3b 0a 0a 23 64  *zFmt, ...);..#d
2020: 65 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72  efine fts5Buffer
2030: 5a 65 72 6f 28 78 29 20 20 20 20 20 20 20 20 20  Zero(x)         
2040: 20 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42      sqlite3Fts5B
2050: 75 66 66 65 72 5a 65 72 6f 28 78 29 0a 23 64 65  ufferZero(x).#de
2060: 66 69 6e 65 20 66 74 73 35 42 75 66 66 65 72 41  fine fts5BufferA
2070: 70 70 65 6e 64 56 61 72 69 6e 74 28 61 2c 62 2c  ppendVarint(a,b,
2080: 63 29 20 73 71 6c 69 74 65 33 46 74 73 35 42 75  c) sqlite3Fts5Bu
2090: 66 66 65 72 41 70 70 65 6e 64 56 61 72 69 6e 74  fferAppendVarint
20a0: 28 61 2c 62 2c 63 29 0a 23 64 65 66 69 6e 65 20  (a,b,c).#define 
20b0: 66 74 73 35 42 75 66 66 65 72 46 72 65 65 28 61  fts5BufferFree(a
20c0: 29 20 20 20 20 20 20 20 20 20 20 20 20 20 73 71  )             sq
20d0: 6c 69 74 65 33 46 74 73 35 42 75 66 66 65 72 46  lite3Fts5BufferF
20e0: 72 65 65 28 61 29 0a 23 64 65 66 69 6e 65 20 66  ree(a).#define f
20f0: 74 73 35 42 75 66 66 65 72 41 70 70 65 6e 64 42  ts5BufferAppendB
2100: 6c 6f 62 28 61 2c 62 2c 63 2c 64 29 20 73 71 6c  lob(a,b,c,d) sql
2110: 69 74 65 33 46 74 73 35 42 75 66 66 65 72 41 70  ite3Fts5BufferAp
2120: 70 65 6e 64 42 6c 6f 62 28 61 2c 62 2c 63 2c 64  pendBlob(a,b,c,d
2130: 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 42 75  ).#define fts5Bu
2140: 66 66 65 72 53 65 74 28 61 2c 62 2c 63 2c 64 29  fferSet(a,b,c,d)
2150: 20 20 20 20 20 20 20 20 73 71 6c 69 74 65 33 46          sqlite3F
2160: 74 73 35 42 75 66 66 65 72 53 65 74 28 61 2c 62  ts5BufferSet(a,b
2170: 2c 63 2c 64 29 0a 0a 23 64 65 66 69 6e 65 20 66  ,c,d)..#define f
2180: 74 73 35 42 75 66 66 65 72 47 72 6f 77 28 70 52  ts5BufferGrow(pR
2190: 63 2c 70 42 75 66 2c 6e 6e 29 20 28 20 5c 0a 20  c,pBuf,nn) ( \. 
21a0: 20 28 75 33 32 29 28 28 70 42 75 66 29 2d 3e 6e   (u32)((pBuf)->n
21b0: 29 20 2b 20 28 75 33 32 29 28 6e 6e 29 20 3c 3d  ) + (u32)(nn) <=
21c0: 20 28 75 33 32 29 28 28 70 42 75 66 29 2d 3e 6e   (u32)((pBuf)->n
21d0: 53 70 61 63 65 29 20 3f 20 30 20 3a 20 5c 0a 20  Space) ? 0 : \. 
21e0: 20 20 20 73 71 6c 69 74 65 33 46 74 73 35 42 75     sqlite3Fts5Bu
21f0: 66 66 65 72 53 69 7a 65 28 28 70 52 63 29 2c 28  fferSize((pRc),(
2200: 70 42 75 66 29 2c 28 6e 6e 29 2b 28 70 42 75 66  pBuf),(nn)+(pBuf
2210: 29 2d 3e 6e 29 20 5c 0a 29 0a 0a 2f 2a 20 57 72  )->n) \.)../* Wr
2220: 69 74 65 20 61 6e 64 20 64 65 63 6f 64 65 20 62  ite and decode b
2230: 69 67 2d 65 6e 64 69 61 6e 20 33 32 2d 62 69 74  ig-endian 32-bit
2240: 20 69 6e 74 65 67 65 72 20 76 61 6c 75 65 73 20   integer values 
2250: 2a 2f 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  */.void sqlite3F
2260: 74 73 35 50 75 74 33 32 28 75 38 2a 2c 20 69 6e  ts5Put32(u8*, in
2270: 74 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  t);.int sqlite3F
2280: 74 73 35 47 65 74 33 32 28 63 6f 6e 73 74 20 75  ts5Get32(const u
2290: 38 2a 29 3b 0a 0a 23 64 65 66 69 6e 65 20 46 54  8*);..#define FT
22a0: 53 35 5f 50 4f 53 32 43 4f 4c 55 4d 4e 28 69 50  S5_POS2COLUMN(iP
22b0: 6f 73 29 20 28 69 6e 74 29 28 69 50 6f 73 20 3e  os) (int)(iPos >
22c0: 3e 20 33 32 29 0a 23 64 65 66 69 6e 65 20 46 54  > 32).#define FT
22d0: 53 35 5f 50 4f 53 32 4f 46 46 53 45 54 28 69 50  S5_POS2OFFSET(iP
22e0: 6f 73 29 20 28 69 6e 74 29 28 69 50 6f 73 20 26  os) (int)(iPos &
22f0: 20 30 78 46 46 46 46 46 46 46 46 29 0a 0a 74 79   0xFFFFFFFF)..ty
2300: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
2310: 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72 20 46  5PoslistReader F
2320: 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72  ts5PoslistReader
2330: 3b 0a 73 74 72 75 63 74 20 46 74 73 35 50 6f 73  ;.struct Fts5Pos
2340: 6c 69 73 74 52 65 61 64 65 72 20 7b 0a 20 20 2f  listReader {.  /
2350: 2a 20 56 61 72 69 61 62 6c 65 73 20 75 73 65 64  * Variables used
2360: 20 6f 6e 6c 79 20 62 79 20 73 71 6c 69 74 65 33   only by sqlite3
2370: 46 74 73 35 50 6f 73 6c 69 73 74 49 74 65 72 58  Fts5PoslistIterX
2380: 58 58 28 29 20 66 75 6e 63 74 69 6f 6e 73 2e 20  XX() functions. 
2390: 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 61  */.  const u8 *a
23a0: 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ;               
23b0: 20 20 20 20 20 2f 2a 20 50 6f 73 69 74 69 6f 6e       /* Position
23c0: 20 6c 69 73 74 20 74 6f 20 69 74 65 72 61 74 65   list to iterate
23d0: 20 74 68 72 6f 75 67 68 20 2a 2f 0a 20 20 69 6e   through */.  in
23e0: 74 20 6e 3b 20 20 20 20 20 20 20 20 20 20 20 20  t n;            
23f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a                /*
2400: 20 53 69 7a 65 20 6f 66 20 62 75 66 66 65 72 20   Size of buffer 
2410: 61 74 20 61 5b 5d 20 69 6e 20 62 79 74 65 73 20  at a[] in bytes 
2420: 2a 2f 0a 20 20 69 6e 74 20 69 3b 20 20 20 20 20  */.  int i;     
2430: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2440: 20 20 20 20 20 2f 2a 20 43 75 72 72 65 6e 74 20       /* Current 
2450: 6f 66 66 73 65 74 20 69 6e 20 61 5b 5d 20 2a 2f  offset in a[] */
2460: 0a 0a 20 20 75 38 20 62 46 6c 61 67 3b 20 20 20  ..  u8 bFlag;   
2470: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2480: 20 20 20 20 2f 2a 20 46 6f 72 20 63 6c 69 65 6e      /* For clien
2490: 74 20 75 73 65 20 28 61 6e 79 20 63 75 73 74 6f  t use (any custo
24a0: 6d 20 70 75 72 70 6f 73 65 29 20 2a 2f 0a 0a 20  m purpose) */.. 
24b0: 20 2f 2a 20 4f 75 74 70 75 74 20 76 61 72 69 61   /* Output varia
24c0: 62 6c 65 73 20 2a 2f 0a 20 20 75 38 20 62 45 6f  bles */.  u8 bEo
24d0: 66 3b 20 20 20 20 20 20 20 20 20 20 20 20 20 20  f;              
24e0: 20 20 20 20 20 20 20 20 20 20 2f 2a 20 53 65 74            /* Set
24f0: 20 74 6f 20 74 72 75 65 20 61 74 20 45 4f 46 20   to true at EOF 
2500: 2a 2f 0a 20 20 69 36 34 20 69 50 6f 73 3b 20 20  */.  i64 iPos;  
2510: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2520: 20 20 20 20 20 2f 2a 20 28 69 43 6f 6c 3c 3c 33       /* (iCol<<3
2530: 32 29 20 2b 20 69 50 6f 73 20 2a 2f 0a 7d 3b 0a  2) + iPos */.};.
2540: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 50  int sqlite3Fts5P
2550: 6f 73 6c 69 73 74 52 65 61 64 65 72 49 6e 69 74  oslistReaderInit
2560: 28 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 61 2c  (.  const u8 *a,
2570: 20 69 6e 74 20 6e 2c 20 20 20 20 20 20 20 20 20   int n,         
2580: 20 20 20 20 2f 2a 20 50 6f 73 6c 69 73 74 20 62      /* Poslist b
2590: 75 66 66 65 72 20 74 6f 20 69 74 65 72 61 74 65  uffer to iterate
25a0: 20 74 68 72 6f 75 67 68 20 2a 2f 0a 20 20 46 74   through */.  Ft
25b0: 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65 72 20  s5PoslistReader 
25c0: 2a 70 49 74 65 72 20 20 20 20 20 20 20 20 2f 2a  *pIter        /*
25d0: 20 49 74 65 72 61 74 6f 72 20 6f 62 6a 65 63 74   Iterator object
25e0: 20 74 6f 20 69 6e 69 74 69 61 6c 69 7a 65 20 2a   to initialize *
25f0: 2f 0a 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  /.);.int sqlite3
2600: 46 74 73 35 50 6f 73 6c 69 73 74 52 65 61 64 65  Fts5PoslistReade
2610: 72 4e 65 78 74 28 46 74 73 35 50 6f 73 6c 69 73  rNext(Fts5Poslis
2620: 74 52 65 61 64 65 72 2a 29 3b 0a 0a 74 79 70 65  tReader*);..type
2630: 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35 50  def struct Fts5P
2640: 6f 73 6c 69 73 74 57 72 69 74 65 72 20 46 74 73  oslistWriter Fts
2650: 35 50 6f 73 6c 69 73 74 57 72 69 74 65 72 3b 0a  5PoslistWriter;.
2660: 73 74 72 75 63 74 20 46 74 73 35 50 6f 73 6c 69  struct Fts5Posli
2670: 73 74 57 72 69 74 65 72 20 7b 0a 20 20 69 36 34  stWriter {.  i64
2680: 20 69 50 72 65 76 3b 0a 7d 3b 0a 69 6e 74 20 73   iPrev;.};.int s
2690: 71 6c 69 74 65 33 46 74 73 35 50 6f 73 6c 69 73  qlite3Fts5Poslis
26a0: 74 57 72 69 74 65 72 41 70 70 65 6e 64 28 46 74  tWriterAppend(Ft
26b0: 73 35 42 75 66 66 65 72 2a 2c 20 46 74 73 35 50  s5Buffer*, Fts5P
26c0: 6f 73 6c 69 73 74 57 72 69 74 65 72 2a 2c 20 69  oslistWriter*, i
26d0: 36 34 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65  64);.void sqlite
26e0: 33 46 74 73 35 50 6f 73 6c 69 73 74 53 61 66 65  3Fts5PoslistSafe
26f0: 41 70 70 65 6e 64 28 46 74 73 35 42 75 66 66 65  Append(Fts5Buffe
2700: 72 2a 2c 20 69 36 34 2a 2c 20 69 36 34 29 3b 0a  r*, i64*, i64);.
2710: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
2720: 50 6f 73 6c 69 73 74 4e 65 78 74 36 34 28 0a 20  PoslistNext64(. 
2730: 20 63 6f 6e 73 74 20 75 38 20 2a 61 2c 20 69 6e   const u8 *a, in
2740: 74 20 6e 2c 20 20 20 20 20 20 20 20 20 20 20 20  t n,            
2750: 20 2f 2a 20 42 75 66 66 65 72 20 63 6f 6e 74 61   /* Buffer conta
2760: 69 6e 69 6e 67 20 70 6f 73 6c 69 73 74 20 2a 2f  ining poslist */
2770: 0a 20 20 69 6e 74 20 2a 70 69 2c 20 20 20 20 20  .  int *pi,     
2780: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
2790: 20 20 20 2f 2a 20 49 4e 2f 4f 55 54 3a 20 4f 66     /* IN/OUT: Of
27a0: 66 73 65 74 20 77 69 74 68 69 6e 20 61 5b 5d 20  fset within a[] 
27b0: 2a 2f 0a 20 20 69 36 34 20 2a 70 69 4f 66 66 20  */.  i64 *piOff 
27c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
27d0: 20 20 20 20 20 2f 2a 20 49 4e 2f 4f 55 54 3a 20       /* IN/OUT: 
27e0: 43 75 72 72 65 6e 74 20 6f 66 66 73 65 74 20 2a  Current offset *
27f0: 2f 0a 29 3b 0a 0a 2f 2a 20 4d 61 6c 6c 6f 63 20  /.);../* Malloc 
2800: 75 74 69 6c 69 74 79 20 2a 2f 0a 76 6f 69 64 20  utility */.void 
2810: 2a 73 71 6c 69 74 65 33 46 74 73 35 4d 61 6c 6c  *sqlite3Fts5Mall
2820: 6f 63 5a 65 72 6f 28 69 6e 74 20 2a 70 52 63 2c  ocZero(int *pRc,
2830: 20 69 6e 74 20 6e 42 79 74 65 29 3b 0a 63 68 61   int nByte);.cha
2840: 72 20 2a 73 71 6c 69 74 65 33 46 74 73 35 53 74  r *sqlite3Fts5St
2850: 72 6e 64 75 70 28 69 6e 74 20 2a 70 52 63 2c 20  rndup(int *pRc, 
2860: 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 49 6e 2c  const char *pIn,
2870: 20 69 6e 74 20 6e 49 6e 29 3b 0a 0a 2f 2a 20 43   int nIn);../* C
2880: 68 61 72 61 63 74 65 72 20 73 65 74 20 74 65 73  haracter set tes
2890: 74 73 20 28 6c 69 6b 65 20 69 73 73 70 61 63 65  ts (like isspace
28a0: 28 29 2c 20 69 73 61 6c 70 68 61 28 29 20 65 74  (), isalpha() et
28b0: 63 2e 29 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74  c.) */.int sqlit
28c0: 65 33 46 74 73 35 49 73 42 61 72 65 77 6f 72 64  e3Fts5IsBareword
28d0: 28 63 68 61 72 20 74 29 3b 0a 0a 0a 2f 2a 20 42  (char t);.../* B
28e0: 75 63 6b 65 74 20 6f 66 20 74 65 72 6d 73 20 6f  ucket of terms o
28f0: 62 6a 65 63 74 20 75 73 65 64 20 62 79 20 74 68  bject used by th
2900: 65 20 69 6e 74 65 67 72 69 74 79 2d 63 68 65 63  e integrity-chec
2910: 6b 20 69 6e 20 6f 66 66 73 65 74 73 3d 30 20 6d  k in offsets=0 m
2920: 6f 64 65 2e 20 2a 2f 0a 74 79 70 65 64 65 66 20  ode. */.typedef 
2930: 73 74 72 75 63 74 20 46 74 73 35 54 65 72 6d 73  struct Fts5Terms
2940: 65 74 20 46 74 73 35 54 65 72 6d 73 65 74 3b 0a  et Fts5Termset;.
2950: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 54  int sqlite3Fts5T
2960: 65 72 6d 73 65 74 4e 65 77 28 46 74 73 35 54 65  ermsetNew(Fts5Te
2970: 72 6d 73 65 74 2a 2a 29 3b 0a 69 6e 74 20 73 71  rmset**);.int sq
2980: 6c 69 74 65 33 46 74 73 35 54 65 72 6d 73 65 74  lite3Fts5Termset
2990: 41 64 64 28 46 74 73 35 54 65 72 6d 73 65 74 2a  Add(Fts5Termset*
29a0: 2c 20 69 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61  , int, const cha
29b0: 72 2a 2c 20 69 6e 74 2c 20 69 6e 74 20 2a 70 62  r*, int, int *pb
29c0: 50 72 65 73 65 6e 74 29 3b 0a 76 6f 69 64 20 73  Present);.void s
29d0: 71 6c 69 74 65 33 46 74 73 35 54 65 72 6d 73 65  qlite3Fts5Termse
29e0: 74 46 72 65 65 28 46 74 73 35 54 65 72 6d 73 65  tFree(Fts5Termse
29f0: 74 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20  t*);../*.** End 
2a00: 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f 20  of interface to 
2a10: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 62 75 66  code in fts5_buf
2a20: 66 65 72 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  fer.c..*********
2a30: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a70: 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  */../***********
2a80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2a90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2aa0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
2ab0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a  ***************.
2ac0: 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f 20  ** Interface to 
2ad0: 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 69 6e 64  code in fts5_ind
2ae0: 65 78 2e 63 2e 20 66 74 73 35 5f 69 6e 64 65 78  ex.c. fts5_index
2af0: 2e 63 20 63 6f 6e 74 61 69 6e 73 20 63 6f 6e 74  .c contains cont
2b00: 61 69 6e 73 20 63 6f 64 65 0a 2a 2a 20 74 6f 20  ains code.** to 
2b10: 61 63 63 65 73 73 20 74 68 65 20 64 61 74 61 20  access the data 
2b20: 73 74 6f 72 65 64 20 69 6e 20 74 68 65 20 25 5f  stored in the %_
2b30: 64 61 74 61 20 74 61 62 6c 65 2e 0a 2a 2f 0a 0a  data table..*/..
2b40: 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46  typedef struct F
2b50: 74 73 35 49 6e 64 65 78 20 46 74 73 35 49 6e 64  ts5Index Fts5Ind
2b60: 65 78 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75  ex;.typedef stru
2b70: 63 74 20 46 74 73 35 49 6e 64 65 78 49 74 65 72  ct Fts5IndexIter
2b80: 20 46 74 73 35 49 6e 64 65 78 49 74 65 72 3b 0a   Fts5IndexIter;.
2b90: 0a 73 74 72 75 63 74 20 46 74 73 35 49 6e 64 65  .struct Fts5Inde
2ba0: 78 49 74 65 72 20 7b 0a 20 20 69 36 34 20 69 52  xIter {.  i64 iR
2bb0: 6f 77 69 64 3b 0a 20 20 63 6f 6e 73 74 20 75 38  owid;.  const u8
2bc0: 20 2a 70 44 61 74 61 3b 0a 20 20 69 6e 74 20 6e   *pData;.  int n
2bd0: 44 61 74 61 3b 0a 20 20 75 38 20 62 45 6f 66 3b  Data;.  u8 bEof;
2be0: 0a 7d 3b 0a 0a 23 64 65 66 69 6e 65 20 73 71 6c  .};..#define sql
2bf0: 69 74 65 33 46 74 73 35 49 74 65 72 45 6f 66 28  ite3Fts5IterEof(
2c00: 78 29 20 28 28 78 29 2d 3e 62 45 6f 66 29 0a 0a  x) ((x)->bEof)..
2c10: 2f 2a 0a 2a 2a 20 56 61 6c 75 65 73 20 75 73 65  /*.** Values use
2c20: 64 20 61 73 20 70 61 72 74 20 6f 66 20 74 68 65  d as part of the
2c30: 20 66 6c 61 67 73 20 61 72 67 75 6d 65 6e 74 20   flags argument 
2c40: 70 61 73 73 65 64 20 74 6f 20 49 6e 64 65 78 51  passed to IndexQ
2c50: 75 65 72 79 28 29 2e 0a 2a 2f 0a 23 64 65 66 69  uery()..*/.#defi
2c60: 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45  ne FTS5INDEX_QUE
2c70: 52 59 5f 50 52 45 46 49 58 20 20 20 20 20 30 78  RY_PREFIX     0x
2c80: 30 30 30 31 20 20 20 2f 2a 20 50 72 65 66 69 78  0001   /* Prefix
2c90: 20 71 75 65 72 79 20 2a 2f 0a 23 64 65 66 69 6e   query */.#defin
2ca0: 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45 52  e FTS5INDEX_QUER
2cb0: 59 5f 44 45 53 43 20 20 20 20 20 20 20 30 78 30  Y_DESC       0x0
2cc0: 30 30 32 20 20 20 2f 2a 20 44 6f 63 73 20 69 6e  002   /* Docs in
2cd0: 20 64 65 73 63 65 6e 64 69 6e 67 20 72 6f 77 69   descending rowi
2ce0: 64 20 6f 72 64 65 72 20 2a 2f 0a 23 64 65 66 69  d order */.#defi
2cf0: 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51 55 45  ne FTS5INDEX_QUE
2d00: 52 59 5f 54 45 53 54 5f 4e 4f 49 44 58 20 30 78  RY_TEST_NOIDX 0x
2d10: 30 30 30 34 20 20 20 2f 2a 20 44 6f 20 6e 6f 74  0004   /* Do not
2d20: 20 75 73 65 20 70 72 65 66 69 78 20 69 6e 64 65   use prefix inde
2d30: 78 20 2a 2f 0a 23 64 65 66 69 6e 65 20 46 54 53  x */.#define FTS
2d40: 35 49 4e 44 45 58 5f 51 55 45 52 59 5f 53 43 41  5INDEX_QUERY_SCA
2d50: 4e 20 20 20 20 20 20 20 30 78 30 30 30 38 20 20  N       0x0008  
2d60: 20 2f 2a 20 53 63 61 6e 20 71 75 65 72 79 20 28   /* Scan query (
2d70: 66 74 73 35 76 6f 63 61 62 29 20 2a 2f 0a 0a 2f  fts5vocab) */../
2d80: 2a 20 54 68 65 20 66 6f 6c 6c 6f 77 69 6e 67 20  * The following 
2d90: 61 72 65 20 75 73 65 64 20 69 6e 74 65 72 6e 61  are used interna
2da0: 6c 6c 79 20 62 79 20 74 68 65 20 66 74 73 35 5f  lly by the fts5_
2db0: 69 6e 64 65 78 2e 63 20 6d 6f 64 75 6c 65 2e 20  index.c module. 
2dc0: 54 68 65 79 20 61 72 65 0a 2a 2a 20 64 65 66 69  They are.** defi
2dd0: 6e 65 64 20 68 65 72 65 20 6f 6e 6c 79 20 74 6f  ned here only to
2de0: 20 6d 61 6b 65 20 69 74 20 65 61 73 69 65 72 20   make it easier 
2df0: 74 6f 20 61 76 6f 69 64 20 63 6c 61 73 68 65 73  to avoid clashes
2e00: 20 77 69 74 68 20 74 68 65 20 66 6c 61 67 73 0a   with the flags.
2e10: 2a 2a 20 61 62 6f 76 65 2e 20 2a 2f 0a 23 64 65  ** above. */.#de
2e20: 66 69 6e 65 20 46 54 53 35 49 4e 44 45 58 5f 51  fine FTS5INDEX_Q
2e30: 55 45 52 59 5f 53 4b 49 50 45 4d 50 54 59 20 20  UERY_SKIPEMPTY  
2e40: 30 78 30 30 31 30 0a 23 64 65 66 69 6e 65 20 46  0x0010.#define F
2e50: 54 53 35 49 4e 44 45 58 5f 51 55 45 52 59 5f 4e  TS5INDEX_QUERY_N
2e60: 4f 4f 55 54 50 55 54 20 20 20 30 78 30 30 32 30  OOUTPUT   0x0020
2e70: 0a 0a 2f 2a 0a 2a 2a 20 43 72 65 61 74 65 2f 64  ../*.** Create/d
2e80: 65 73 74 72 6f 79 20 61 6e 20 46 74 73 35 49 6e  estroy an Fts5In
2e90: 64 65 78 20 6f 62 6a 65 63 74 2e 0a 2a 2f 0a 69  dex object..*/.i
2ea0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
2eb0: 64 65 78 4f 70 65 6e 28 46 74 73 35 43 6f 6e 66  dexOpen(Fts5Conf
2ec0: 69 67 20 2a 70 43 6f 6e 66 69 67 2c 20 69 6e 74  ig *pConfig, int
2ed0: 20 62 43 72 65 61 74 65 2c 20 46 74 73 35 49 6e   bCreate, Fts5In
2ee0: 64 65 78 2a 2a 2c 20 63 68 61 72 2a 2a 29 3b 0a  dex**, char**);.
2ef0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
2f00: 6e 64 65 78 43 6c 6f 73 65 28 46 74 73 35 49 6e  ndexClose(Fts5In
2f10: 64 65 78 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20  dex *p);../*.** 
2f20: 52 65 74 75 72 6e 20 61 20 73 69 6d 70 6c 65 20  Return a simple 
2f30: 63 68 65 63 6b 73 75 6d 20 76 61 6c 75 65 20 62  checksum value b
2f40: 61 73 65 64 20 6f 6e 20 74 68 65 20 61 72 67 75  ased on the argu
2f50: 6d 65 6e 74 73 2e 0a 2a 2f 0a 75 36 34 20 73 71  ments..*/.u64 sq
2f60: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 45 6e  lite3Fts5IndexEn
2f70: 74 72 79 43 6b 73 75 6d 28 0a 20 20 69 36 34 20  tryCksum(.  i64 
2f80: 69 52 6f 77 69 64 2c 20 0a 20 20 69 6e 74 20 69  iRowid, .  int i
2f90: 43 6f 6c 2c 20 0a 20 20 69 6e 74 20 69 50 6f 73  Col, .  int iPos
2fa0: 2c 20 0a 20 20 69 6e 74 20 69 49 64 78 2c 0a 20  , .  int iIdx,. 
2fb0: 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 65   const char *pTe
2fc0: 72 6d 2c 0a 20 20 69 6e 74 20 6e 54 65 72 6d 0a  rm,.  int nTerm.
2fd0: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 41 72 67 75 6d 65  );../*.** Argume
2fe0: 6e 74 20 70 20 70 6f 69 6e 74 73 20 74 6f 20 61  nt p points to a
2ff0: 20 62 75 66 66 65 72 20 63 6f 6e 74 61 69 6e 69   buffer containi
3000: 6e 67 20 75 74 66 2d 38 20 74 65 78 74 20 74 68  ng utf-8 text th
3010: 61 74 20 69 73 20 6e 20 62 79 74 65 73 20 69 6e  at is n bytes in
3020: 20 0a 2a 2a 20 73 69 7a 65 2e 20 52 65 74 75 72   .** size. Retur
3030: 6e 20 74 68 65 20 6e 75 6d 62 65 72 20 6f 66 20  n the number of 
3040: 62 79 74 65 73 20 69 6e 20 74 68 65 20 6e 43 68  bytes in the nCh
3050: 61 72 20 63 68 61 72 61 63 74 65 72 20 70 72 65  ar character pre
3060: 66 69 78 20 6f 66 20 74 68 65 0a 2a 2a 20 62 75  fix of the.** bu
3070: 66 66 65 72 2c 20 6f 72 20 30 20 69 66 20 74 68  ffer, or 0 if th
3080: 65 72 65 20 61 72 65 20 6c 65 73 73 20 74 68 61  ere are less tha
3090: 6e 20 6e 43 68 61 72 20 63 68 61 72 61 63 74 65  n nChar characte
30a0: 72 73 20 69 6e 20 74 6f 74 61 6c 2e 0a 2a 2f 0a  rs in total..*/.
30b0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
30c0: 6e 64 65 78 43 68 61 72 6c 65 6e 54 6f 42 79 74  ndexCharlenToByt
30d0: 65 6c 65 6e 28 0a 20 20 63 6f 6e 73 74 20 63 68  elen(.  const ch
30e0: 61 72 20 2a 70 2c 20 0a 20 20 69 6e 74 20 6e 42  ar *p, .  int nB
30f0: 79 74 65 2c 20 0a 20 20 69 6e 74 20 6e 43 68 61  yte, .  int nCha
3100: 72 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 4f 70 65 6e  r.);../*.** Open
3110: 20 61 20 6e 65 77 20 69 74 65 72 61 74 6f 72 20   a new iterator 
3120: 74 6f 20 69 74 65 72 61 74 65 20 74 68 6f 75 67  to iterate thoug
3130: 68 20 61 6c 6c 20 72 6f 77 69 64 73 20 74 68 61  h all rowids tha
3140: 74 20 6d 61 74 63 68 20 74 68 65 20 0a 2a 2a 20  t match the .** 
3150: 73 70 65 63 69 66 69 65 64 20 74 6f 6b 65 6e 20  specified token 
3160: 6f 72 20 74 6f 6b 65 6e 20 70 72 65 66 69 78 2e  or token prefix.
3170: 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  .*/.int sqlite3F
3180: 74 73 35 49 6e 64 65 78 51 75 65 72 79 28 0a 20  ts5IndexQuery(. 
3190: 20 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 20   Fts5Index *p,  
31a0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
31b0: 20 2f 2a 20 46 54 53 20 69 6e 64 65 78 20 74 6f   /* FTS index to
31c0: 20 71 75 65 72 79 20 2a 2f 0a 20 20 63 6f 6e 73   query */.  cons
31d0: 74 20 63 68 61 72 20 2a 70 54 6f 6b 65 6e 2c 20  t char *pToken, 
31e0: 69 6e 74 20 6e 54 6f 6b 65 6e 2c 20 2f 2a 20 54  int nToken, /* T
31f0: 6f 6b 65 6e 20 28 6f 72 20 70 72 65 66 69 78 29  oken (or prefix)
3200: 20 74 6f 20 71 75 65 72 79 20 66 6f 72 20 2a 2f   to query for */
3210: 0a 20 20 69 6e 74 20 66 6c 61 67 73 2c 20 20 20  .  int flags,   
3220: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3230: 20 20 20 2f 2a 20 4d 61 73 6b 20 6f 66 20 46 54     /* Mask of FT
3240: 53 35 49 4e 44 45 58 5f 51 55 45 52 59 5f 58 20  S5INDEX_QUERY_X 
3250: 66 6c 61 67 73 20 2a 2f 0a 20 20 46 74 73 35 43  flags */.  Fts5C
3260: 6f 6c 73 65 74 20 2a 70 43 6f 6c 73 65 74 2c 20  olset *pColset, 
3270: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4d 61             /* Ma
3280: 74 63 68 20 74 68 65 73 65 20 63 6f 6c 75 6d 6e  tch these column
3290: 73 20 6f 6e 6c 79 20 2a 2f 0a 20 20 46 74 73 35  s only */.  Fts5
32a0: 49 6e 64 65 78 49 74 65 72 20 2a 2a 70 70 49 74  IndexIter **ppIt
32b0: 65 72 20 20 20 20 20 20 20 20 20 20 2f 2a 20 4f  er          /* O
32c0: 55 54 3a 20 4e 65 77 20 69 74 65 72 61 74 6f 72  UT: New iterator
32d0: 20 6f 62 6a 65 63 74 20 2a 2f 0a 29 3b 0a 0a 2f   object */.);../
32e0: 2a 0a 2a 2a 20 54 68 65 20 76 61 72 69 6f 75 73  *.** The various
32f0: 20 6f 70 65 72 61 74 69 6f 6e 73 20 6f 6e 20 6f   operations on o
3300: 70 65 6e 20 74 6f 6b 65 6e 20 6f 72 20 74 6f 6b  pen token or tok
3310: 65 6e 20 70 72 65 66 69 78 20 69 74 65 72 61 74  en prefix iterat
3320: 6f 72 73 20 6f 70 65 6e 65 64 0a 2a 2a 20 75 73  ors opened.** us
3330: 69 6e 67 20 73 71 6c 69 74 65 33 46 74 73 35 49  ing sqlite3Fts5I
3340: 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f 0a  ndexQuery()..*/.
3350: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49  int sqlite3Fts5I
3360: 74 65 72 4e 65 78 74 28 46 74 73 35 49 6e 64 65  terNext(Fts5Inde
3370: 78 49 74 65 72 2a 29 3b 0a 69 6e 74 20 73 71 6c  xIter*);.int sql
3380: 69 74 65 33 46 74 73 35 49 74 65 72 4e 65 78 74  ite3Fts5IterNext
3390: 46 72 6f 6d 28 46 74 73 35 49 6e 64 65 78 49 74  From(Fts5IndexIt
33a0: 65 72 2a 2c 20 69 36 34 20 69 4d 61 74 63 68 29  er*, i64 iMatch)
33b0: 3b 0a 0a 2f 2a 0a 2a 2a 20 43 6c 6f 73 65 20 61  ;../*.** Close a
33c0: 6e 20 69 74 65 72 61 74 6f 72 20 6f 70 65 6e 65  n iterator opene
33d0: 64 20 62 79 20 73 71 6c 69 74 65 33 46 74 73 35  d by sqlite3Fts5
33e0: 49 6e 64 65 78 51 75 65 72 79 28 29 2e 0a 2a 2f  IndexQuery()..*/
33f0: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
3400: 35 49 74 65 72 43 6c 6f 73 65 28 46 74 73 35 49  5IterClose(Fts5I
3410: 6e 64 65 78 49 74 65 72 2a 29 3b 0a 0a 2f 2a 0a  ndexIter*);../*.
3420: 2a 2a 20 54 68 69 73 20 69 6e 74 65 72 66 61 63  ** This interfac
3430: 65 20 69 73 20 75 73 65 64 20 62 79 20 74 68 65  e is used by the
3440: 20 66 74 73 35 76 6f 63 61 62 20 6d 6f 64 75 6c   fts5vocab modul
3450: 65 2e 0a 2a 2f 0a 63 6f 6e 73 74 20 63 68 61 72  e..*/.const char
3460: 20 2a 73 71 6c 69 74 65 33 46 74 73 35 49 74 65   *sqlite3Fts5Ite
3470: 72 54 65 72 6d 28 46 74 73 35 49 6e 64 65 78 49  rTerm(Fts5IndexI
3480: 74 65 72 2a 2c 20 69 6e 74 2a 29 3b 0a 69 6e 74  ter*, int*);.int
3490: 20 73 71 6c 69 74 65 33 46 74 73 35 49 74 65 72   sqlite3Fts5Iter
34a0: 4e 65 78 74 53 63 61 6e 28 46 74 73 35 49 6e 64  NextScan(Fts5Ind
34b0: 65 78 49 74 65 72 2a 29 3b 0a 0a 0a 2f 2a 0a 2a  exIter*);.../*.*
34c0: 2a 20 49 6e 73 65 72 74 20 6f 72 20 72 65 6d 6f  * Insert or remo
34d0: 76 65 20 64 61 74 61 20 74 6f 20 6f 72 20 66 72  ve data to or fr
34e0: 6f 6d 20 74 68 65 20 69 6e 64 65 78 2e 20 45 61  om the index. Ea
34f0: 63 68 20 74 69 6d 65 20 61 20 64 6f 63 75 6d 65  ch time a docume
3500: 6e 74 20 69 73 20 0a 2a 2a 20 61 64 64 65 64 20  nt is .** added 
3510: 74 6f 20 6f 72 20 72 65 6d 6f 76 65 64 20 66 72  to or removed fr
3520: 6f 6d 20 74 68 65 20 69 6e 64 65 78 2c 20 74 68  om the index, th
3530: 69 73 20 66 75 6e 63 74 69 6f 6e 20 69 73 20 63  is function is c
3540: 61 6c 6c 65 64 20 6f 6e 65 20 6f 72 20 6d 6f 72  alled one or mor
3550: 65 0a 2a 2a 20 74 69 6d 65 73 2e 0a 2a 2a 0a 2a  e.** times..**.*
3560: 2a 20 46 6f 72 20 61 6e 20 69 6e 73 65 72 74 2c  * For an insert,
3570: 20 69 74 20 6d 75 73 74 20 62 65 20 63 61 6c 6c   it must be call
3580: 65 64 20 6f 6e 63 65 20 66 6f 72 20 65 61 63 68  ed once for each
3590: 20 74 6f 6b 65 6e 20 69 6e 20 74 68 65 20 6e 65   token in the ne
35a0: 77 20 64 6f 63 75 6d 65 6e 74 2e 0a 2a 2a 20 49  w document..** I
35b0: 66 20 74 68 65 20 6f 70 65 72 61 74 69 6f 6e 20  f the operation 
35c0: 69 73 20 61 20 64 65 6c 65 74 65 2c 20 69 74 20  is a delete, it 
35d0: 6d 75 73 74 20 62 65 20 63 61 6c 6c 65 64 20 28  must be called (
35e0: 61 74 20 6c 65 61 73 74 29 20 6f 6e 63 65 20 66  at least) once f
35f0: 6f 72 20 65 61 63 68 0a 2a 2a 20 75 6e 69 71 75  or each.** uniqu
3600: 65 20 74 6f 6b 65 6e 20 69 6e 20 74 68 65 20 64  e token in the d
3610: 6f 63 75 6d 65 6e 74 20 77 69 74 68 20 61 6e 20  ocument with an 
3620: 69 43 6f 6c 20 76 61 6c 75 65 20 6c 65 73 73 20  iCol value less 
3630: 74 68 61 6e 20 7a 65 72 6f 2e 20 54 68 65 20 69  than zero. The i
3640: 50 6f 73 0a 2a 2a 20 61 72 67 75 6d 65 6e 74 20  Pos.** argument 
3650: 69 73 20 69 67 6e 6f 72 65 64 20 66 6f 72 20 61  is ignored for a
3660: 20 64 65 6c 65 74 65 2e 0a 2a 2f 0a 69 6e 74 20   delete..*/.int 
3670: 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78  sqlite3Fts5Index
3680: 57 72 69 74 65 28 0a 20 20 46 74 73 35 49 6e 64  Write(.  Fts5Ind
3690: 65 78 20 2a 70 2c 20 20 20 20 20 20 20 20 20 20  ex *p,          
36a0: 20 20 20 20 20 20 20 20 20 2f 2a 20 49 6e 64 65           /* Inde
36b0: 78 20 74 6f 20 77 72 69 74 65 20 74 6f 20 2a 2f  x to write to */
36c0: 0a 20 20 69 6e 74 20 69 43 6f 6c 2c 20 20 20 20  .  int iCol,    
36d0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
36e0: 20 20 20 2f 2a 20 43 6f 6c 75 6d 6e 20 74 6f 6b     /* Column tok
36f0: 65 6e 20 61 70 70 65 61 72 73 20 69 6e 20 28 2d  en appears in (-
3700: 76 65 20 2d 3e 20 64 65 6c 65 74 65 29 20 2a 2f  ve -> delete) */
3710: 0a 20 20 69 6e 74 20 69 50 6f 73 2c 20 20 20 20  .  int iPos,    
3720: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3730: 20 20 20 2f 2a 20 50 6f 73 69 74 69 6f 6e 20 6f     /* Position o
3740: 66 20 74 6f 6b 65 6e 20 77 69 74 68 69 6e 20 63  f token within c
3750: 6f 6c 75 6d 6e 20 2a 2f 0a 20 20 63 6f 6e 73 74  olumn */.  const
3760: 20 63 68 61 72 20 2a 70 54 6f 6b 65 6e 2c 20 69   char *pToken, i
3770: 6e 74 20 6e 54 6f 6b 65 6e 20 20 2f 2a 20 54 6f  nt nToken  /* To
3780: 6b 65 6e 20 74 6f 20 61 64 64 20 6f 72 20 72 65  ken to add or re
3790: 6d 6f 76 65 20 74 6f 20 6f 72 20 66 72 6f 6d 20  move to or from 
37a0: 69 6e 64 65 78 20 2a 2f 0a 29 3b 0a 0a 2f 2a 0a  index */.);../*.
37b0: 2a 2a 20 49 6e 64 69 63 61 74 65 20 74 68 61 74  ** Indicate that
37c0: 20 73 75 62 73 65 71 75 65 6e 74 20 63 61 6c 6c   subsequent call
37d0: 73 20 74 6f 20 73 71 6c 69 74 65 33 46 74 73 35  s to sqlite3Fts5
37e0: 49 6e 64 65 78 57 72 69 74 65 28 29 20 70 65 72  IndexWrite() per
37f0: 74 61 69 6e 20 74 6f 0a 2a 2a 20 64 6f 63 75 6d  tain to.** docum
3800: 65 6e 74 20 69 44 6f 63 69 64 2e 0a 2a 2f 0a 69  ent iDocid..*/.i
3810: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3820: 64 65 78 42 65 67 69 6e 57 72 69 74 65 28 0a 20  dexBeginWrite(. 
3830: 20 46 74 73 35 49 6e 64 65 78 20 2a 70 2c 20 20   Fts5Index *p,  
3840: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
3850: 20 2f 2a 20 49 6e 64 65 78 20 74 6f 20 77 72 69   /* Index to wri
3860: 74 65 20 74 6f 20 2a 2f 0a 20 20 69 6e 74 20 62  te to */.  int b
3870: 44 65 6c 65 74 65 2c 20 20 20 20 20 20 20 20 20  Delete,         
3880: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 54 72             /* Tr
3890: 75 65 20 69 66 20 63 75 72 72 65 6e 74 20 6f 70  ue if current op
38a0: 65 72 61 74 69 6f 6e 20 69 73 20 61 20 64 65 6c  eration is a del
38b0: 65 74 65 20 2a 2f 0a 20 20 69 36 34 20 69 44 6f  ete */.  i64 iDo
38c0: 63 69 64 20 20 20 20 20 20 20 20 20 20 20 20 20  cid             
38d0: 20 20 20 20 20 20 20 20 20 2f 2a 20 44 6f 63 69           /* Doci
38e0: 64 20 74 6f 20 61 64 64 20 6f 72 20 72 65 6d 6f  d to add or remo
38f0: 76 65 20 64 61 74 61 20 66 72 6f 6d 20 2a 2f 0a  ve data from */.
3900: 29 3b 0a 0a 2f 2a 0a 2a 2a 20 46 6c 75 73 68 20  );../*.** Flush 
3910: 61 6e 79 20 64 61 74 61 20 73 74 6f 72 65 64 20  any data stored 
3920: 69 6e 20 74 68 65 20 69 6e 2d 6d 65 6d 6f 72 79  in the in-memory
3930: 20 68 61 73 68 20 74 61 62 6c 65 73 20 74 6f 20   hash tables to 
3940: 74 68 65 20 64 61 74 61 62 61 73 65 2e 0a 2a 2a  the database..**
3950: 20 41 6c 73 6f 20 63 6c 6f 73 65 20 61 6e 79 20   Also close any 
3960: 6f 70 65 6e 20 62 6c 6f 62 20 68 61 6e 64 6c 65  open blob handle
3970: 73 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  s..*/.int sqlite
3980: 33 46 74 73 35 49 6e 64 65 78 53 79 6e 63 28 46  3Fts5IndexSync(F
3990: 74 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a 2f  ts5Index *p);../
39a0: 2a 0a 2a 2a 20 44 69 73 63 61 72 64 20 61 6e 79  *.** Discard any
39b0: 20 64 61 74 61 20 73 74 6f 72 65 64 20 69 6e 20   data stored in 
39c0: 74 68 65 20 69 6e 2d 6d 65 6d 6f 72 79 20 68 61  the in-memory ha
39d0: 73 68 20 74 61 62 6c 65 73 2e 20 44 6f 20 6e 6f  sh tables. Do no
39e0: 74 20 77 72 69 74 65 20 69 74 0a 2a 2a 20 74 6f  t write it.** to
39f0: 20 74 68 65 20 64 61 74 61 62 61 73 65 2e 20 41   the database. A
3a00: 64 64 69 74 69 6f 6e 61 6c 6c 79 2c 20 61 73 73  dditionally, ass
3a10: 75 6d 65 20 74 68 61 74 20 74 68 65 20 63 6f 6e  ume that the con
3a20: 74 65 6e 74 73 20 6f 66 20 74 68 65 20 25 5f 64  tents of the %_d
3a30: 61 74 61 0a 2a 2a 20 74 61 62 6c 65 20 6d 61 79  ata.** table may
3a40: 20 68 61 76 65 20 63 68 61 6e 67 65 64 20 6f 6e   have changed on
3a50: 20 64 69 73 6b 2e 20 53 6f 20 61 6e 79 20 69 6e   disk. So any in
3a60: 2d 6d 65 6d 6f 72 79 20 63 61 63 68 65 73 20 6f  -memory caches o
3a70: 66 20 25 5f 64 61 74 61 20 0a 2a 2a 20 72 65 63  f %_data .** rec
3a80: 6f 72 64 73 20 6d 75 73 74 20 62 65 20 69 6e 76  ords must be inv
3a90: 61 6c 69 64 61 74 65 64 2e 0a 2a 2f 0a 69 6e 74  alidated..*/.int
3aa0: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3ab0: 78 52 6f 6c 6c 62 61 63 6b 28 46 74 73 35 49 6e  xRollback(Fts5In
3ac0: 64 65 78 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a 20  dex *p);../*.** 
3ad0: 47 65 74 20 6f 72 20 73 65 74 20 74 68 65 20 22  Get or set the "
3ae0: 61 76 65 72 61 67 65 73 22 20 76 61 6c 75 65 73  averages" values
3af0: 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33  ..*/.int sqlite3
3b00: 46 74 73 35 49 6e 64 65 78 47 65 74 41 76 65 72  Fts5IndexGetAver
3b10: 61 67 65 73 28 46 74 73 35 49 6e 64 65 78 20 2a  ages(Fts5Index *
3b20: 70 2c 20 69 36 34 20 2a 70 6e 52 6f 77 2c 20 69  p, i64 *pnRow, i
3b30: 36 34 20 2a 61 6e 53 69 7a 65 29 3b 0a 69 6e 74  64 *anSize);.int
3b40: 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65   sqlite3Fts5Inde
3b50: 78 53 65 74 41 76 65 72 61 67 65 73 28 46 74 73  xSetAverages(Fts
3b60: 35 49 6e 64 65 78 20 2a 70 2c 20 63 6f 6e 73 74  5Index *p, const
3b70: 20 75 38 2a 2c 20 69 6e 74 29 3b 0a 0a 2f 2a 0a   u8*, int);../*.
3b80: 2a 2a 20 46 75 6e 63 74 69 6f 6e 73 20 63 61 6c  ** Functions cal
3b90: 6c 65 64 20 62 79 20 74 68 65 20 73 74 6f 72 61  led by the stora
3ba0: 67 65 20 6d 6f 64 75 6c 65 20 61 73 20 70 61 72  ge module as par
3bb0: 74 20 6f 66 20 69 6e 74 65 67 72 69 74 79 2d 63  t of integrity-c
3bc0: 68 65 63 6b 2e 0a 2a 2f 0a 69 6e 74 20 73 71 6c  heck..*/.int sql
3bd0: 69 74 65 33 46 74 73 35 49 6e 64 65 78 49 6e 74  ite3Fts5IndexInt
3be0: 65 67 72 69 74 79 43 68 65 63 6b 28 46 74 73 35  egrityCheck(Fts5
3bf0: 49 6e 64 65 78 2a 2c 20 75 36 34 20 63 6b 73 75  Index*, u64 cksu
3c00: 6d 29 3b 0a 0a 2f 2a 20 0a 2a 2a 20 43 61 6c 6c  m);../* .** Call
3c10: 65 64 20 64 75 72 69 6e 67 20 76 69 72 74 75 61  ed during virtua
3c20: 6c 20 6d 6f 64 75 6c 65 20 69 6e 69 74 69 61 6c  l module initial
3c30: 69 7a 61 74 69 6f 6e 20 74 6f 20 72 65 67 69 73  ization to regis
3c40: 74 65 72 20 55 44 46 20 0a 2a 2a 20 66 74 73 35  ter UDF .** fts5
3c50: 5f 64 65 63 6f 64 65 28 29 20 77 69 74 68 20 53  _decode() with S
3c60: 51 4c 69 74 65 20 0a 2a 2f 0a 69 6e 74 20 73 71  QLite .*/.int sq
3c70: 6c 69 74 65 33 46 74 73 35 49 6e 64 65 78 49 6e  lite3Fts5IndexIn
3c80: 69 74 28 73 71 6c 69 74 65 33 2a 29 3b 0a 0a 69  it(sqlite3*);..i
3c90: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e  nt sqlite3Fts5In
3ca0: 64 65 78 53 65 74 43 6f 6f 6b 69 65 28 46 74 73  dexSetCookie(Fts
3cb0: 35 49 6e 64 65 78 2a 2c 20 69 6e 74 29 3b 0a 0a  5Index*, int);..
3cc0: 2f 2a 0a 2a 2a 20 52 65 74 75 72 6e 20 74 68 65  /*.** Return the
3cd0: 20 74 6f 74 61 6c 20 6e 75 6d 62 65 72 20 6f 66   total number of
3ce0: 20 65 6e 74 72 69 65 73 20 72 65 61 64 20 66 72   entries read fr
3cf0: 6f 6d 20 74 68 65 20 25 5f 64 61 74 61 20 74 61  om the %_data ta
3d00: 62 6c 65 20 62 79 20 0a 2a 2a 20 74 68 69 73 20  ble by .** this 
3d10: 63 6f 6e 6e 65 63 74 69 6f 6e 20 73 69 6e 63 65  connection since
3d20: 20 69 74 20 77 61 73 20 63 72 65 61 74 65 64 2e   it was created.
3d30: 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  .*/.int sqlite3F
3d40: 74 73 35 49 6e 64 65 78 52 65 61 64 73 28 46 74  ts5IndexReads(Ft
3d50: 73 35 49 6e 64 65 78 20 2a 70 29 3b 0a 0a 69 6e  s5Index *p);..in
3d60: 74 20 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64  t sqlite3Fts5Ind
3d70: 65 78 52 65 69 6e 69 74 28 46 74 73 35 49 6e 64  exReinit(Fts5Ind
3d80: 65 78 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69  ex *p);.int sqli
3d90: 74 65 33 46 74 73 35 49 6e 64 65 78 4f 70 74 69  te3Fts5IndexOpti
3da0: 6d 69 7a 65 28 46 74 73 35 49 6e 64 65 78 20 2a  mize(Fts5Index *
3db0: 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  p);.int sqlite3F
3dc0: 74 73 35 49 6e 64 65 78 4d 65 72 67 65 28 46 74  ts5IndexMerge(Ft
3dd0: 73 35 49 6e 64 65 78 20 2a 70 2c 20 69 6e 74 20  s5Index *p, int 
3de0: 6e 4d 65 72 67 65 29 3b 0a 69 6e 74 20 73 71 6c  nMerge);.int sql
3df0: 69 74 65 33 46 74 73 35 49 6e 64 65 78 52 65 73  ite3Fts5IndexRes
3e00: 65 74 28 46 74 73 35 49 6e 64 65 78 20 2a 70 29  et(Fts5Index *p)
3e10: 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74  ;..int sqlite3Ft
3e20: 73 35 49 6e 64 65 78 4c 6f 61 64 43 6f 6e 66 69  s5IndexLoadConfi
3e30: 67 28 46 74 73 35 49 6e 64 65 78 20 2a 70 29 3b  g(Fts5Index *p);
3e40: 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69  ../*.** End of i
3e50: 6e 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65  nterface to code
3e60: 20 69 6e 20 66 74 73 35 5f 69 6e 64 65 78 2e 63   in fts5_index.c
3e70: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
3e80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3e90: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ea0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3eb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f  ************/../
3ec0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ed0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ee0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3ef0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
3f00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e  **********.** In
3f10: 74 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20  terface to code 
3f20: 69 6e 20 66 74 73 35 5f 76 61 72 69 6e 74 2e 63  in fts5_varint.c
3f30: 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  . .*/.int sqlite
3f40: 33 46 74 73 35 47 65 74 56 61 72 69 6e 74 33 32  3Fts5GetVarint32
3f50: 28 63 6f 6e 73 74 20 75 6e 73 69 67 6e 65 64 20  (const unsigned 
3f60: 63 68 61 72 20 2a 70 2c 20 75 33 32 20 2a 76 29  char *p, u32 *v)
3f70: 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ;.int sqlite3Fts
3f80: 35 47 65 74 56 61 72 69 6e 74 4c 65 6e 28 75 33  5GetVarintLen(u3
3f90: 32 20 69 56 61 6c 29 3b 0a 75 38 20 73 71 6c 69  2 iVal);.u8 sqli
3fa0: 74 65 33 46 74 73 35 47 65 74 56 61 72 69 6e 74  te3Fts5GetVarint
3fb0: 28 63 6f 6e 73 74 20 75 6e 73 69 67 6e 65 64 20  (const unsigned 
3fc0: 63 68 61 72 2a 2c 20 75 36 34 2a 29 3b 0a 69 6e  char*, u64*);.in
3fd0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 50 75 74  t sqlite3Fts5Put
3fe0: 56 61 72 69 6e 74 28 75 6e 73 69 67 6e 65 64 20  Varint(unsigned 
3ff0: 63 68 61 72 20 2a 70 2c 20 75 36 34 20 76 29 3b  char *p, u64 v);
4000: 0a 0a 23 64 65 66 69 6e 65 20 66 74 73 35 47 65  ..#define fts5Ge
4010: 74 56 61 72 69 6e 74 33 32 28 61 2c 62 29 20 73  tVarint32(a,b) s
4020: 71 6c 69 74 65 33 46 74 73 35 47 65 74 56 61 72  qlite3Fts5GetVar
4030: 69 6e 74 33 32 28 61 2c 28 75 33 32 2a 29 26 62  int32(a,(u32*)&b
4040: 29 0a 23 64 65 66 69 6e 65 20 66 74 73 35 47 65  ).#define fts5Ge
4050: 74 56 61 72 69 6e 74 20 20 20 20 73 71 6c 69 74  tVarint    sqlit
4060: 65 33 46 74 73 35 47 65 74 56 61 72 69 6e 74 0a  e3Fts5GetVarint.
4070: 0a 23 64 65 66 69 6e 65 20 66 74 73 35 46 61 73  .#define fts5Fas
4080: 74 47 65 74 56 61 72 69 6e 74 33 32 28 61 2c 20  tGetVarint32(a, 
4090: 69 4f 66 66 2c 20 6e 56 61 6c 29 20 7b 20 20 20  iOff, nVal) {   
40a0: 20 20 20 5c 0a 20 20 6e 56 61 6c 20 3d 20 28 61     \.  nVal = (a
40b0: 29 5b 69 4f 66 66 2b 2b 5d 3b 20 20 20 20 20 20  )[iOff++];      
40c0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
40d0: 20 20 20 20 20 20 20 5c 0a 20 20 69 66 28 20 6e         \.  if( n
40e0: 56 61 6c 20 26 20 30 78 38 30 20 29 7b 20 20 20  Val & 0x80 ){   
40f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4100: 20 20 20 20 20 20 20 20 20 20 20 5c 0a 20 20 20             \.   
4110: 20 69 4f 66 66 2d 2d 3b 20 20 20 20 20 20 20 20   iOff--;        
4120: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4130: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 5c                 \
4140: 0a 20 20 20 20 69 4f 66 66 20 2b 3d 20 66 74 73  .    iOff += fts
4150: 35 47 65 74 56 61 72 69 6e 74 33 32 28 26 28 61  5GetVarint32(&(a
4160: 29 5b 69 4f 66 66 5d 2c 20 6e 56 61 6c 29 3b 20  )[iOff], nVal); 
4170: 20 20 20 5c 0a 20 20 7d 20 20 20 20 20 20 20 20     \.  }        
4180: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4190: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
41a0: 20 20 20 20 20 20 20 5c 0a 7d 0a 0a 0a 2f 2a 0a         \.}.../*.
41b0: 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66  ** End of interf
41c0: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66  ace to code in f
41d0: 74 73 35 5f 76 61 72 69 6e 74 2e 63 2e 0a 2a 2a  ts5_varint.c..**
41e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
41f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4220: 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a  ********/.../***
4230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4250: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4260: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4270: 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72  *******.** Inter
4280: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
4290: 66 74 73 35 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e 74  fts5.c. .*/..int
42a0: 20 73 71 6c 69 74 65 33 46 74 73 35 47 65 74 54   sqlite3Fts5GetT
42b0: 6f 6b 65 6e 69 7a 65 72 28 0a 20 20 46 74 73 35  okenizer(.  Fts5
42c0: 47 6c 6f 62 61 6c 2a 2c 20 0a 20 20 63 6f 6e 73  Global*, .  cons
42d0: 74 20 63 68 61 72 20 2a 2a 61 7a 41 72 67 2c 0a  t char **azArg,.
42e0: 20 20 69 6e 74 20 6e 41 72 67 2c 0a 20 20 46 74    int nArg,.  Ft
42f0: 73 35 54 6f 6b 65 6e 69 7a 65 72 2a 2a 2c 0a 20  s5Tokenizer**,. 
4300: 20 66 74 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2a   fts5_tokenizer*
4310: 2a 2c 0a 20 20 63 68 61 72 20 2a 2a 70 7a 45 72  *,.  char **pzEr
4320: 72 0a 29 3b 0a 0a 46 74 73 35 49 6e 64 65 78 20  r.);..Fts5Index 
4330: 2a 73 71 6c 69 74 65 33 46 74 73 35 49 6e 64 65  *sqlite3Fts5Inde
4340: 78 46 72 6f 6d 43 73 72 69 64 28 46 74 73 35 47  xFromCsrid(Fts5G
4350: 6c 6f 62 61 6c 2a 2c 20 69 36 34 2c 20 46 74 73  lobal*, i64, Fts
4360: 35 43 6f 6e 66 69 67 20 2a 2a 29 3b 0a 0a 2f 2a  5Config **);../*
4370: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
4380: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
4390: 66 74 73 35 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a  fts5.c..********
43a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
43e0: 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  **/../**********
43f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4400: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4410: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4420: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4430: 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f  .** Interface to
4440: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 68 61   code in fts5_ha
4450: 73 68 2e 63 2e 20 0a 2a 2f 0a 74 79 70 65 64 65  sh.c. .*/.typede
4460: 66 20 73 74 72 75 63 74 20 46 74 73 35 48 61 73  f struct Fts5Has
4470: 68 20 46 74 73 35 48 61 73 68 3b 0a 0a 2f 2a 0a  h Fts5Hash;../*.
4480: 2a 2a 20 43 72 65 61 74 65 20 61 20 68 61 73 68  ** Create a hash
4490: 20 74 61 62 6c 65 2c 20 66 72 65 65 20 61 20 68   table, free a h
44a0: 61 73 68 20 74 61 62 6c 65 2e 0a 2a 2f 0a 69 6e  ash table..*/.in
44b0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 48 61 73  t sqlite3Fts5Has
44c0: 68 4e 65 77 28 46 74 73 35 43 6f 6e 66 69 67 2a  hNew(Fts5Config*
44d0: 2c 20 46 74 73 35 48 61 73 68 2a 2a 2c 20 69 6e  , Fts5Hash**, in
44e0: 74 20 2a 70 6e 53 69 7a 65 29 3b 0a 76 6f 69 64  t *pnSize);.void
44f0: 20 73 71 6c 69 74 65 33 46 74 73 35 48 61 73 68   sqlite3Fts5Hash
4500: 46 72 65 65 28 46 74 73 35 48 61 73 68 2a 29 3b  Free(Fts5Hash*);
4510: 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73  ..int sqlite3Fts
4520: 35 48 61 73 68 57 72 69 74 65 28 0a 20 20 46 74  5HashWrite(.  Ft
4530: 73 35 48 61 73 68 2a 2c 0a 20 20 69 36 34 20 69  s5Hash*,.  i64 i
4540: 52 6f 77 69 64 2c 20 20 20 20 20 20 20 20 20 20  Rowid,          
4550: 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20 52 6f             /* Ro
4560: 77 69 64 20 66 6f 72 20 74 68 69 73 20 65 6e 74  wid for this ent
4570: 72 79 20 2a 2f 0a 20 20 69 6e 74 20 69 43 6f 6c  ry */.  int iCol
4580: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ,               
4590: 20 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c 75 6d          /* Colum
45a0: 6e 20 74 6f 6b 65 6e 20 61 70 70 65 61 72 73 20  n token appears 
45b0: 69 6e 20 28 2d 76 65 20 2d 3e 20 64 65 6c 65 74  in (-ve -> delet
45c0: 65 29 20 2a 2f 0a 20 20 69 6e 74 20 69 50 6f 73  e) */.  int iPos
45d0: 2c 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20  ,               
45e0: 20 20 20 20 20 20 20 20 2f 2a 20 50 6f 73 69 74          /* Posit
45f0: 69 6f 6e 20 6f 66 20 74 6f 6b 65 6e 20 77 69 74  ion of token wit
4600: 68 69 6e 20 63 6f 6c 75 6d 6e 20 2a 2f 0a 20 20  hin column */.  
4610: 63 68 61 72 20 62 42 79 74 65 2c 0a 20 20 63 6f  char bByte,.  co
4620: 6e 73 74 20 63 68 61 72 20 2a 70 54 6f 6b 65 6e  nst char *pToken
4630: 2c 20 69 6e 74 20 6e 54 6f 6b 65 6e 20 20 2f 2a  , int nToken  /*
4640: 20 54 6f 6b 65 6e 20 74 6f 20 61 64 64 20 6f 72   Token to add or
4650: 20 72 65 6d 6f 76 65 20 74 6f 20 6f 72 20 66 72   remove to or fr
4660: 6f 6d 20 69 6e 64 65 78 20 2a 2f 0a 29 3b 0a 0a  om index */.);..
4670: 2f 2a 0a 2a 2a 20 45 6d 70 74 79 20 28 62 75 74  /*.** Empty (but
4680: 20 64 6f 20 6e 6f 74 20 64 65 6c 65 74 65 29 20   do not delete) 
4690: 61 20 68 61 73 68 20 74 61 62 6c 65 2e 0a 2a 2f  a hash table..*/
46a0: 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73  .void sqlite3Fts
46b0: 35 48 61 73 68 43 6c 65 61 72 28 46 74 73 35 48  5HashClear(Fts5H
46c0: 61 73 68 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  ash*);..int sqli
46d0: 74 65 33 46 74 73 35 48 61 73 68 51 75 65 72 79  te3Fts5HashQuery
46e0: 28 0a 20 20 46 74 73 35 48 61 73 68 2a 2c 20 20  (.  Fts5Hash*,  
46f0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4700: 20 20 20 20 2f 2a 20 48 61 73 68 20 74 61 62 6c      /* Hash tabl
4710: 65 20 74 6f 20 71 75 65 72 79 20 2a 2f 0a 20 20  e to query */.  
4720: 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 65 72  const char *pTer
4730: 6d 2c 20 69 6e 74 20 6e 54 65 72 6d 2c 20 20 20  m, int nTerm,   
4740: 2f 2a 20 51 75 65 72 79 20 74 65 72 6d 20 2a 2f  /* Query term */
4750: 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 2a 70 70  .  const u8 **pp
4760: 44 6f 63 6c 69 73 74 2c 20 20 20 20 20 20 20 20  Doclist,        
4770: 20 20 20 2f 2a 20 4f 55 54 3a 20 50 6f 69 6e 74     /* OUT: Point
4780: 65 72 20 74 6f 20 64 6f 63 6c 69 73 74 20 66 6f  er to doclist fo
4790: 72 20 70 54 65 72 6d 20 2a 2f 0a 20 20 69 6e 74  r pTerm */.  int
47a0: 20 2a 70 6e 44 6f 63 6c 69 73 74 20 20 20 20 20   *pnDoclist     
47b0: 20 20 20 20 20 20 20 20 20 20 20 20 20 2f 2a 20               /* 
47c0: 4f 55 54 3a 20 53 69 7a 65 20 6f 66 20 64 6f 63  OUT: Size of doc
47d0: 6c 69 73 74 20 69 6e 20 62 79 74 65 73 20 2a 2f  list in bytes */
47e0: 0a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .);..int sqlite3
47f0: 46 74 73 35 48 61 73 68 53 63 61 6e 49 6e 69 74  Fts5HashScanInit
4800: 28 0a 20 20 46 74 73 35 48 61 73 68 2a 2c 20 20  (.  Fts5Hash*,  
4810: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
4820: 20 20 20 20 2f 2a 20 48 61 73 68 20 74 61 62 6c      /* Hash tabl
4830: 65 20 74 6f 20 71 75 65 72 79 20 2a 2f 0a 20 20  e to query */.  
4840: 63 6f 6e 73 74 20 63 68 61 72 20 2a 70 54 65 72  const char *pTer
4850: 6d 2c 20 69 6e 74 20 6e 54 65 72 6d 20 20 20 20  m, int nTerm    
4860: 2f 2a 20 51 75 65 72 79 20 70 72 65 66 69 78 20  /* Query prefix 
4870: 2a 2f 0a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74  */.);.void sqlit
4880: 65 33 46 74 73 35 48 61 73 68 53 63 61 6e 4e 65  e3Fts5HashScanNe
4890: 78 74 28 46 74 73 35 48 61 73 68 2a 29 3b 0a 69  xt(Fts5Hash*);.i
48a0: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 48 61  nt sqlite3Fts5Ha
48b0: 73 68 53 63 61 6e 45 6f 66 28 46 74 73 35 48 61  shScanEof(Fts5Ha
48c0: 73 68 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74  sh*);.void sqlit
48d0: 65 33 46 74 73 35 48 61 73 68 53 63 61 6e 45 6e  e3Fts5HashScanEn
48e0: 74 72 79 28 46 74 73 35 48 61 73 68 20 2a 2c 0a  try(Fts5Hash *,.
48f0: 20 20 63 6f 6e 73 74 20 63 68 61 72 20 2a 2a 70    const char **p
4900: 7a 54 65 72 6d 2c 20 20 20 20 20 20 20 20 20 20  zTerm,          
4910: 20 20 2f 2a 20 4f 55 54 3a 20 74 65 72 6d 20 28    /* OUT: term (
4920: 6e 75 6c 2d 74 65 72 6d 69 6e 61 74 65 64 29 20  nul-terminated) 
4930: 2a 2f 0a 20 20 63 6f 6e 73 74 20 75 38 20 2a 2a  */.  const u8 **
4940: 70 70 44 6f 63 6c 69 73 74 2c 20 20 20 20 20 20  ppDoclist,      
4950: 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 70 6f 69       /* OUT: poi
4960: 6e 74 65 72 20 74 6f 20 64 6f 63 6c 69 73 74 20  nter to doclist 
4970: 2a 2f 0a 20 20 69 6e 74 20 2a 70 6e 44 6f 63 6c  */.  int *pnDocl
4980: 69 73 74 20 20 20 20 20 20 20 20 20 20 20 20 20  ist             
4990: 20 20 20 20 20 2f 2a 20 4f 55 54 3a 20 73 69 7a       /* OUT: siz
49a0: 65 20 6f 66 20 64 6f 63 6c 69 73 74 20 69 6e 20  e of doclist in 
49b0: 62 79 74 65 73 20 2a 2f 0a 29 3b 0a 0a 0a 2f 2a  bytes */.);.../*
49c0: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
49d0: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
49e0: 66 74 73 35 5f 68 61 73 68 2e 63 2e 0a 2a 2a 2a  fts5_hash.c..***
49f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a00: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a10: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a20: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a30: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a  *******/../*****
4a40: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
4a80: 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61  *****.** Interfa
4a90: 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74  ce to code in ft
4aa0: 73 35 5f 73 74 6f 72 61 67 65 2e 63 2e 20 66 74  s5_storage.c. ft
4ab0: 73 35 5f 73 74 6f 72 61 67 65 2e 63 20 63 6f 6e  s5_storage.c con
4ac0: 74 61 69 6e 73 20 63 6f 6e 74 61 69 6e 73 20 0a  tains contains .
4ad0: 2a 2a 20 63 6f 64 65 20 74 6f 20 61 63 63 65 73  ** code to acces
4ae0: 73 20 74 68 65 20 64 61 74 61 20 73 74 6f 72 65  s the data store
4af0: 64 20 69 6e 20 74 68 65 20 25 5f 63 6f 6e 74 65  d in the %_conte
4b00: 6e 74 20 61 6e 64 20 25 5f 64 6f 63 73 69 7a 65  nt and %_docsize
4b10: 20 74 61 62 6c 65 73 2e 0a 2a 2f 0a 0a 23 64 65   tables..*/..#de
4b20: 66 69 6e 65 20 46 54 53 35 5f 53 54 4d 54 5f 53  fine FTS5_STMT_S
4b30: 43 41 4e 5f 41 53 43 20 20 30 20 20 20 20 20 2f  CAN_ASC  0     /
4b40: 2a 20 53 45 4c 45 43 54 20 72 6f 77 69 64 2c 20  * SELECT rowid, 
4b50: 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f 52 44 45 52  * FROM ... ORDER
4b60: 20 42 59 20 31 20 41 53 43 20 2a 2f 0a 23 64 65   BY 1 ASC */.#de
4b70: 66 69 6e 65 20 46 54 53 35 5f 53 54 4d 54 5f 53  fine FTS5_STMT_S
4b80: 43 41 4e 5f 44 45 53 43 20 31 20 20 20 20 20 2f  CAN_DESC 1     /
4b90: 2a 20 53 45 4c 45 43 54 20 72 6f 77 69 64 2c 20  * SELECT rowid, 
4ba0: 2a 20 46 52 4f 4d 20 2e 2e 2e 20 4f 52 44 45 52  * FROM ... ORDER
4bb0: 20 42 59 20 31 20 44 45 53 43 20 2a 2f 0a 23 64   BY 1 DESC */.#d
4bc0: 65 66 69 6e 65 20 46 54 53 35 5f 53 54 4d 54 5f  efine FTS5_STMT_
4bd0: 4c 4f 4f 4b 55 50 20 20 20 20 32 20 20 20 20 20  LOOKUP    2     
4be0: 2f 2a 20 53 45 4c 45 43 54 20 72 6f 77 69 64 2c  /* SELECT rowid,
4bf0: 20 2a 20 46 52 4f 4d 20 2e 2e 2e 20 57 48 45 52   * FROM ... WHER
4c00: 45 20 72 6f 77 69 64 3d 3f 20 2a 2f 0a 0a 74 79  E rowid=? */..ty
4c10: 70 65 64 65 66 20 73 74 72 75 63 74 20 46 74 73  pedef struct Fts
4c20: 35 53 74 6f 72 61 67 65 20 46 74 73 35 53 74 6f  5Storage Fts5Sto
4c30: 72 61 67 65 3b 0a 0a 69 6e 74 20 73 71 6c 69 74  rage;..int sqlit
4c40: 65 33 46 74 73 35 53 74 6f 72 61 67 65 4f 70 65  e3Fts5StorageOpe
4c50: 6e 28 46 74 73 35 43 6f 6e 66 69 67 2a 2c 20 46  n(Fts5Config*, F
4c60: 74 73 35 49 6e 64 65 78 2a 2c 20 69 6e 74 2c 20  ts5Index*, int, 
4c70: 46 74 73 35 53 74 6f 72 61 67 65 2a 2a 2c 20 63  Fts5Storage**, c
4c80: 68 61 72 2a 2a 29 3b 0a 69 6e 74 20 73 71 6c 69  har**);.int sqli
4c90: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 43 6c  te3Fts5StorageCl
4ca0: 6f 73 65 28 46 74 73 35 53 74 6f 72 61 67 65 20  ose(Fts5Storage 
4cb0: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  *p);.int sqlite3
4cc0: 46 74 73 35 53 74 6f 72 61 67 65 52 65 6e 61 6d  Fts5StorageRenam
4cd0: 65 28 46 74 73 35 53 74 6f 72 61 67 65 2a 2c 20  e(Fts5Storage*, 
4ce0: 63 6f 6e 73 74 20 63 68 61 72 20 2a 7a 4e 61 6d  const char *zNam
4cf0: 65 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  e);..int sqlite3
4d00: 46 74 73 35 44 72 6f 70 41 6c 6c 28 46 74 73 35  Fts5DropAll(Fts5
4d10: 43 6f 6e 66 69 67 2a 29 3b 0a 69 6e 74 20 73 71  Config*);.int sq
4d20: 6c 69 74 65 33 46 74 73 35 43 72 65 61 74 65 54  lite3Fts5CreateT
4d30: 61 62 6c 65 28 46 74 73 35 43 6f 6e 66 69 67 2a  able(Fts5Config*
4d40: 2c 20 63 6f 6e 73 74 20 63 68 61 72 2a 2c 20 63  , const char*, c
4d50: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 69 6e 74 2c  onst char*, int,
4d60: 20 63 68 61 72 20 2a 2a 29 3b 0a 0a 69 6e 74 20   char **);..int 
4d70: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4d80: 67 65 44 65 6c 65 74 65 28 46 74 73 35 53 74 6f  geDelete(Fts5Sto
4d90: 72 61 67 65 20 2a 70 2c 20 69 36 34 2c 20 73 71  rage *p, i64, sq
4da0: 6c 69 74 65 33 5f 76 61 6c 75 65 2a 2a 29 3b 0a  lite3_value**);.
4db0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 53  int sqlite3Fts5S
4dc0: 74 6f 72 61 67 65 43 6f 6e 74 65 6e 74 49 6e 73  torageContentIns
4dd0: 65 72 74 28 46 74 73 35 53 74 6f 72 61 67 65 20  ert(Fts5Storage 
4de0: 2a 70 2c 20 73 71 6c 69 74 65 33 5f 76 61 6c 75  *p, sqlite3_valu
4df0: 65 2a 2a 2c 20 69 36 34 2a 29 3b 0a 69 6e 74 20  e**, i64*);.int 
4e00: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4e10: 67 65 49 6e 64 65 78 49 6e 73 65 72 74 28 46 74  geIndexInsert(Ft
4e20: 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 73 71  s5Storage *p, sq
4e30: 6c 69 74 65 33 5f 76 61 6c 75 65 2a 2a 2c 20 69  lite3_value**, i
4e40: 36 34 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65  64);..int sqlite
4e50: 33 46 74 73 35 53 74 6f 72 61 67 65 49 6e 74 65  3Fts5StorageInte
4e60: 67 72 69 74 79 28 46 74 73 35 53 74 6f 72 61 67  grity(Fts5Storag
4e70: 65 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  e *p);..int sqli
4e80: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 53 74  te3Fts5StorageSt
4e90: 6d 74 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a  mt(Fts5Storage *
4ea0: 70 2c 20 69 6e 74 20 65 53 74 6d 74 2c 20 73 71  p, int eStmt, sq
4eb0: 6c 69 74 65 33 5f 73 74 6d 74 2a 2a 2c 20 63 68  lite3_stmt**, ch
4ec0: 61 72 2a 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69  ar**);.void sqli
4ed0: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 53 74  te3Fts5StorageSt
4ee0: 6d 74 52 65 6c 65 61 73 65 28 46 74 73 35 53 74  mtRelease(Fts5St
4ef0: 6f 72 61 67 65 20 2a 70 2c 20 69 6e 74 20 65 53  orage *p, int eS
4f00: 74 6d 74 2c 20 73 71 6c 69 74 65 33 5f 73 74 6d  tmt, sqlite3_stm
4f10: 74 2a 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65  t*);..int sqlite
4f20: 33 46 74 73 35 53 74 6f 72 61 67 65 44 6f 63 73  3Fts5StorageDocs
4f30: 69 7a 65 28 46 74 73 35 53 74 6f 72 61 67 65 20  ize(Fts5Storage 
4f40: 2a 70 2c 20 69 36 34 20 69 52 6f 77 69 64 2c 20  *p, i64 iRowid, 
4f50: 69 6e 74 20 2a 61 43 6f 6c 29 3b 0a 69 6e 74 20  int *aCol);.int 
4f60: 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61  sqlite3Fts5Stora
4f70: 67 65 53 69 7a 65 28 46 74 73 35 53 74 6f 72 61  geSize(Fts5Stora
4f80: 67 65 20 2a 70 2c 20 69 6e 74 20 69 43 6f 6c 2c  ge *p, int iCol,
4f90: 20 69 36 34 20 2a 70 6e 41 76 67 29 3b 0a 69 6e   i64 *pnAvg);.in
4fa0: 74 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f  t sqlite3Fts5Sto
4fb0: 72 61 67 65 52 6f 77 43 6f 75 6e 74 28 46 74 73  rageRowCount(Fts
4fc0: 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 69 36 34  5Storage *p, i64
4fd0: 20 2a 70 6e 52 6f 77 29 3b 0a 0a 69 6e 74 20 73   *pnRow);..int s
4fe0: 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72 61 67  qlite3Fts5Storag
4ff0: 65 53 79 6e 63 28 46 74 73 35 53 74 6f 72 61 67  eSync(Fts5Storag
5000: 65 20 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74  e *p);.int sqlit
5010: 65 33 46 74 73 35 53 74 6f 72 61 67 65 52 6f 6c  e3Fts5StorageRol
5020: 6c 62 61 63 6b 28 46 74 73 35 53 74 6f 72 61 67  lback(Fts5Storag
5030: 65 20 2a 70 29 3b 0a 0a 69 6e 74 20 73 71 6c 69  e *p);..int sqli
5040: 74 65 33 46 74 73 35 53 74 6f 72 61 67 65 43 6f  te3Fts5StorageCo
5050: 6e 66 69 67 56 61 6c 75 65 28 0a 20 20 20 20 46  nfigValue(.    F
5060: 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20 63  ts5Storage *p, c
5070: 6f 6e 73 74 20 63 68 61 72 2a 2c 20 73 71 6c 69  onst char*, sqli
5080: 74 65 33 5f 76 61 6c 75 65 2a 2c 20 69 6e 74 0a  te3_value*, int.
5090: 29 3b 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  );..int sqlite3F
50a0: 74 73 35 53 74 6f 72 61 67 65 44 65 6c 65 74 65  ts5StorageDelete
50b0: 41 6c 6c 28 46 74 73 35 53 74 6f 72 61 67 65 20  All(Fts5Storage 
50c0: 2a 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  *p);.int sqlite3
50d0: 46 74 73 35 53 74 6f 72 61 67 65 52 65 62 75 69  Fts5StorageRebui
50e0: 6c 64 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a  ld(Fts5Storage *
50f0: 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  p);.int sqlite3F
5100: 74 73 35 53 74 6f 72 61 67 65 4f 70 74 69 6d 69  ts5StorageOptimi
5110: 7a 65 28 46 74 73 35 53 74 6f 72 61 67 65 20 2a  ze(Fts5Storage *
5120: 70 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  p);.int sqlite3F
5130: 74 73 35 53 74 6f 72 61 67 65 4d 65 72 67 65 28  ts5StorageMerge(
5140: 46 74 73 35 53 74 6f 72 61 67 65 20 2a 70 2c 20  Fts5Storage *p, 
5150: 69 6e 74 20 6e 4d 65 72 67 65 29 3b 0a 69 6e 74  int nMerge);.int
5160: 20 73 71 6c 69 74 65 33 46 74 73 35 53 74 6f 72   sqlite3Fts5Stor
5170: 61 67 65 52 65 73 65 74 28 46 74 73 35 53 74 6f  ageReset(Fts5Sto
5180: 72 61 67 65 20 2a 70 29 3b 0a 0a 2f 2a 0a 2a 2a  rage *p);../*.**
5190: 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66 61 63   End of interfac
51a0: 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73  e to code in fts
51b0: 35 5f 73 74 6f 72 61 67 65 2e 63 2e 0a 2a 2a 2a  5_storage.c..***
51c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
51f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5200: 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a  *******/.../****
5210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5220: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5230: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5240: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5250: 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66  ******.** Interf
5260: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66  ace to code in f
5270: 74 73 35 5f 65 78 70 72 2e 63 2e 20 0a 2a 2f 0a  ts5_expr.c. .*/.
5280: 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46  typedef struct F
5290: 74 73 35 45 78 70 72 20 46 74 73 35 45 78 70 72  ts5Expr Fts5Expr
52a0: 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74  ;.typedef struct
52b0: 20 46 74 73 35 45 78 70 72 4e 6f 64 65 20 46 74   Fts5ExprNode Ft
52c0: 73 35 45 78 70 72 4e 6f 64 65 3b 0a 74 79 70 65  s5ExprNode;.type
52d0: 64 65 66 20 73 74 72 75 63 74 20 46 74 73 35 50  def struct Fts5P
52e0: 61 72 73 65 20 46 74 73 35 50 61 72 73 65 3b 0a  arse Fts5Parse;.
52f0: 74 79 70 65 64 65 66 20 73 74 72 75 63 74 20 46  typedef struct F
5300: 74 73 35 54 6f 6b 65 6e 20 46 74 73 35 54 6f 6b  ts5Token Fts5Tok
5310: 65 6e 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75  en;.typedef stru
5320: 63 74 20 46 74 73 35 45 78 70 72 50 68 72 61 73  ct Fts5ExprPhras
5330: 65 20 46 74 73 35 45 78 70 72 50 68 72 61 73 65  e Fts5ExprPhrase
5340: 3b 0a 74 79 70 65 64 65 66 20 73 74 72 75 63 74  ;.typedef struct
5350: 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74   Fts5ExprNearset
5360: 20 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74   Fts5ExprNearset
5370: 3b 0a 0a 73 74 72 75 63 74 20 46 74 73 35 54 6f  ;..struct Fts5To
5380: 6b 65 6e 20 7b 0a 20 20 63 6f 6e 73 74 20 63 68  ken {.  const ch
5390: 61 72 20 2a 70 3b 20 20 20 20 20 20 20 20 20 20  ar *p;          
53a0: 20 20 20 20 20 20 20 20 2f 2a 20 54 6f 6b 65 6e          /* Token
53b0: 20 74 65 78 74 20 28 6e 6f 74 20 4e 55 4c 4c 20   text (not NULL 
53c0: 74 65 72 6d 69 6e 61 74 65 64 29 20 2a 2f 0a 20  terminated) */. 
53d0: 20 69 6e 74 20 6e 3b 20 20 20 20 20 20 20 20 20   int n;         
53e0: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
53f0: 20 2f 2a 20 53 69 7a 65 20 6f 66 20 62 75 66 66   /* Size of buff
5400: 65 72 20 70 20 69 6e 20 62 79 74 65 73 20 2a 2f  er p in bytes */
5410: 0a 7d 3b 0a 0a 2f 2a 20 50 61 72 73 65 20 61 20  .};../* Parse a 
5420: 4d 41 54 43 48 20 65 78 70 72 65 73 73 69 6f 6e  MATCH expression
5430: 2e 20 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65 33  . */.int sqlite3
5440: 46 74 73 35 45 78 70 72 4e 65 77 28 0a 20 20 46  Fts5ExprNew(.  F
5450: 74 73 35 43 6f 6e 66 69 67 20 2a 70 43 6f 6e 66  ts5Config *pConf
5460: 69 67 2c 20 0a 20 20 69 6e 74 20 69 43 6f 6c 2c  ig, .  int iCol,
5470: 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20 20                  
5480: 20 20 20 20 20 20 20 2f 2a 20 43 6f 6c 75 6d 6e         /* Column
5490: 20 6f 6e 20 4c 48 53 20 6f 66 20 4d 41 54 43 48   on LHS of MATCH
54a0: 20 6f 70 65 72 61 74 6f 72 20 2a 2f 0a 20 20 63   operator */.  c
54b0: 6f 6e 73 74 20 63 68 61 72 20 2a 7a 45 78 70 72  onst char *zExpr
54c0: 2c 0a 20 20 46 74 73 35 45 78 70 72 20 2a 2a 70  ,.  Fts5Expr **p
54d0: 70 4e 65 77 2c 20 0a 20 20 63 68 61 72 20 2a 2a  pNew, .  char **
54e0: 70 7a 45 72 72 0a 29 3b 0a 0a 2f 2a 0a 2a 2a 20  pzErr.);../*.** 
54f0: 66 6f 72 28 72 63 20 3d 20 73 71 6c 69 74 65 33  for(rc = sqlite3
5500: 46 74 73 35 45 78 70 72 46 69 72 73 74 28 70 45  Fts5ExprFirst(pE
5510: 78 70 72 2c 20 70 49 64 78 2c 20 62 44 65 73 63  xpr, pIdx, bDesc
5520: 29 3b 0a 2a 2a 20 20 20 20 20 72 63 3d 3d 53 51  );.**     rc==SQ
5530: 4c 49 54 45 5f 4f 4b 20 26 26 20 30 3d 3d 73 71  LITE_OK && 0==sq
5540: 6c 69 74 65 33 46 74 73 35 45 78 70 72 45 6f 66  lite3Fts5ExprEof
5550: 28 70 45 78 70 72 29 3b 0a 2a 2a 20 20 20 20 20  (pExpr);.**     
5560: 72 63 20 3d 20 73 71 6c 69 74 65 33 46 74 73 35  rc = sqlite3Fts5
5570: 45 78 70 72 4e 65 78 74 28 70 45 78 70 72 29 0a  ExprNext(pExpr).
5580: 2a 2a 20 29 7b 0a 2a 2a 20 20 20 2f 2f 20 54 68  ** ){.**   // Th
5590: 65 20 64 6f 63 75 6d 65 6e 74 20 77 69 74 68 20  e document with 
55a0: 72 6f 77 69 64 20 69 52 6f 77 69 64 20 6d 61 74  rowid iRowid mat
55b0: 63 68 65 73 20 74 68 65 20 65 78 70 72 65 73 73  ches the express
55c0: 69 6f 6e 21 0a 2a 2a 20 20 20 69 36 34 20 69 52  ion!.**   i64 iR
55d0: 6f 77 69 64 20 3d 20 73 71 6c 69 74 65 33 46 74  owid = sqlite3Ft
55e0: 73 35 45 78 70 72 52 6f 77 69 64 28 70 45 78 70  s5ExprRowid(pExp
55f0: 72 29 3b 0a 2a 2a 20 7d 0a 2a 2f 0a 69 6e 74 20  r);.** }.*/.int 
5600: 73 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 46  sqlite3Fts5ExprF
5610: 69 72 73 74 28 46 74 73 35 45 78 70 72 2a 2c 20  irst(Fts5Expr*, 
5620: 46 74 73 35 49 6e 64 65 78 20 2a 70 49 64 78 2c  Fts5Index *pIdx,
5630: 20 69 36 34 20 69 4d 69 6e 2c 20 69 6e 74 20 62   i64 iMin, int b
5640: 44 65 73 63 29 3b 0a 69 6e 74 20 73 71 6c 69 74  Desc);.int sqlit
5650: 65 33 46 74 73 35 45 78 70 72 4e 65 78 74 28 46  e3Fts5ExprNext(F
5660: 74 73 35 45 78 70 72 2a 2c 20 69 36 34 20 69 4d  ts5Expr*, i64 iM
5670: 61 78 29 3b 0a 69 6e 74 20 73 71 6c 69 74 65 33  ax);.int sqlite3
5680: 46 74 73 35 45 78 70 72 45 6f 66 28 46 74 73 35  Fts5ExprEof(Fts5
5690: 45 78 70 72 2a 29 3b 0a 69 36 34 20 73 71 6c 69  Expr*);.i64 sqli
56a0: 74 65 33 46 74 73 35 45 78 70 72 52 6f 77 69 64  te3Fts5ExprRowid
56b0: 28 46 74 73 35 45 78 70 72 2a 29 3b 0a 0a 76 6f  (Fts5Expr*);..vo
56c0: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 45 78  id sqlite3Fts5Ex
56d0: 70 72 46 72 65 65 28 46 74 73 35 45 78 70 72 2a  prFree(Fts5Expr*
56e0: 29 3b 0a 0a 2f 2a 20 43 61 6c 6c 65 64 20 64 75  );../* Called du
56f0: 72 69 6e 67 20 73 74 61 72 74 75 70 20 74 6f 20  ring startup to 
5700: 72 65 67 69 73 74 65 72 20 61 20 55 44 46 20 77  register a UDF w
5710: 69 74 68 20 53 51 4c 69 74 65 20 2a 2f 0a 69 6e  ith SQLite */.in
5720: 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  t sqlite3Fts5Exp
5730: 72 49 6e 69 74 28 46 74 73 35 47 6c 6f 62 61 6c  rInit(Fts5Global
5740: 2a 2c 20 73 71 6c 69 74 65 33 2a 29 3b 0a 0a 69  *, sqlite3*);..i
5750: 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78  nt sqlite3Fts5Ex
5760: 70 72 50 68 72 61 73 65 43 6f 75 6e 74 28 46 74  prPhraseCount(Ft
5770: 73 35 45 78 70 72 2a 29 3b 0a 69 6e 74 20 73 71  s5Expr*);.int sq
5780: 6c 69 74 65 33 46 74 73 35 45 78 70 72 50 68 72  lite3Fts5ExprPhr
5790: 61 73 65 53 69 7a 65 28 46 74 73 35 45 78 70 72  aseSize(Fts5Expr
57a0: 2a 2c 20 69 6e 74 20 69 50 68 72 61 73 65 29 3b  *, int iPhrase);
57b0: 0a 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35  .int sqlite3Fts5
57c0: 45 78 70 72 50 6f 73 6c 69 73 74 28 46 74 73 35  ExprPoslist(Fts5
57d0: 45 78 70 72 2a 2c 20 69 6e 74 2c 20 63 6f 6e 73  Expr*, int, cons
57e0: 74 20 75 38 20 2a 2a 29 3b 0a 0a 74 79 70 65 64  t u8 **);..typed
57f0: 65 66 20 73 74 72 75 63 74 20 46 74 73 35 50 6f  ef struct Fts5Po
5800: 73 6c 69 73 74 50 6f 70 75 6c 61 74 6f 72 20 46  slistPopulator F
5810: 74 73 35 50 6f 73 6c 69 73 74 50 6f 70 75 6c 61  ts5PoslistPopula
5820: 74 6f 72 3b 0a 46 74 73 35 50 6f 73 6c 69 73 74  tor;.Fts5Poslist
5830: 50 6f 70 75 6c 61 74 6f 72 20 2a 73 71 6c 69 74  Populator *sqlit
5840: 65 33 46 74 73 35 45 78 70 72 43 6c 65 61 72 50  e3Fts5ExprClearP
5850: 6f 73 6c 69 73 74 73 28 46 74 73 35 45 78 70 72  oslists(Fts5Expr
5860: 2a 2c 20 69 6e 74 29 3b 0a 69 6e 74 20 73 71 6c  *, int);.int sql
5870: 69 74 65 33 46 74 73 35 45 78 70 72 50 6f 70 75  ite3Fts5ExprPopu
5880: 6c 61 74 65 50 6f 73 6c 69 73 74 73 28 0a 20 20  latePoslists(.  
5890: 20 20 46 74 73 35 43 6f 6e 66 69 67 2a 2c 20 46    Fts5Config*, F
58a0: 74 73 35 45 78 70 72 2a 2c 20 46 74 73 35 50 6f  ts5Expr*, Fts5Po
58b0: 73 6c 69 73 74 50 6f 70 75 6c 61 74 6f 72 2a 2c  slistPopulator*,
58c0: 20 69 6e 74 2c 20 63 6f 6e 73 74 20 63 68 61 72   int, const char
58d0: 2a 2c 20 69 6e 74 0a 29 3b 0a 76 6f 69 64 20 73  *, int.);.void s
58e0: 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 43 68  qlite3Fts5ExprCh
58f0: 65 63 6b 50 6f 73 6c 69 73 74 73 28 46 74 73 35  eckPoslists(Fts5
5900: 45 78 70 72 2a 2c 20 69 36 34 29 3b 0a 0a 69 6e  Expr*, i64);..in
5910: 74 20 73 71 6c 69 74 65 33 46 74 73 35 45 78 70  t sqlite3Fts5Exp
5920: 72 43 6c 6f 6e 65 50 68 72 61 73 65 28 46 74 73  rClonePhrase(Fts
5930: 35 45 78 70 72 2a 2c 20 69 6e 74 2c 20 46 74 73  5Expr*, int, Fts
5940: 35 45 78 70 72 2a 2a 29 3b 0a 0a 69 6e 74 20 73  5Expr**);..int s
5950: 71 6c 69 74 65 33 46 74 73 35 45 78 70 72 50 68  qlite3Fts5ExprPh
5960: 72 61 73 65 43 6f 6c 6c 69 73 74 28 46 74 73 35  raseCollist(Fts5
5970: 45 78 70 72 20 2a 2c 20 69 6e 74 2c 20 63 6f 6e  Expr *, int, con
5980: 73 74 20 75 38 20 2a 2a 2c 20 69 6e 74 20 2a 29  st u8 **, int *)
5990: 3b 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ;../************
59a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
59b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a  ***************.
59c0: 2a 2a 20 54 68 65 20 66 74 73 35 5f 65 78 70 72  ** The fts5_expr
59d0: 2e 63 20 41 50 49 20 61 62 6f 76 65 20 74 68 69  .c API above thi
59e0: 73 20 70 6f 69 6e 74 20 69 73 20 75 73 65 64 20  s point is used 
59f0: 62 79 20 74 68 65 20 6f 74 68 65 72 20 68 61 6e  by the other han
5a00: 64 2d 77 72 69 74 74 65 6e 0a 2a 2a 20 43 20 63  d-written.** C c
5a10: 6f 64 65 20 69 6e 20 74 68 69 73 20 6d 6f 64 75  ode in this modu
5a20: 6c 65 2e 20 54 68 65 20 69 6e 74 65 72 66 61 63  le. The interfac
5a30: 65 73 20 62 65 6c 6f 77 20 74 68 69 73 20 70 6f  es below this po
5a40: 69 6e 74 20 61 72 65 20 63 61 6c 6c 65 64 20 62  int are called b
5a50: 79 0a 2a 2a 20 74 68 65 20 70 61 72 73 65 72 20  y.** the parser 
5a60: 63 6f 64 65 20 69 6e 20 66 74 73 35 70 61 72 73  code in fts5pars
5a70: 65 2e 79 2e 20 20 2a 2f 0a 0a 76 6f 69 64 20 73  e.y.  */..void s
5a80: 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65 45  qlite3Fts5ParseE
5a90: 72 72 6f 72 28 46 74 73 35 50 61 72 73 65 20 2a  rror(Fts5Parse *
5aa0: 70 50 61 72 73 65 2c 20 63 6f 6e 73 74 20 63 68  pParse, const ch
5ab0: 61 72 20 2a 7a 46 6d 74 2c 20 2e 2e 2e 29 3b 0a  ar *zFmt, ...);.
5ac0: 0a 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a 73  .Fts5ExprNode *s
5ad0: 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65 4e  qlite3Fts5ParseN
5ae0: 6f 64 65 28 0a 20 20 46 74 73 35 50 61 72 73 65  ode(.  Fts5Parse
5af0: 20 2a 70 50 61 72 73 65 2c 0a 20 20 69 6e 74 20   *pParse,.  int 
5b00: 65 54 79 70 65 2c 0a 20 20 46 74 73 35 45 78 70  eType,.  Fts5Exp
5b10: 72 4e 6f 64 65 20 2a 70 4c 65 66 74 2c 0a 20 20  rNode *pLeft,.  
5b20: 46 74 73 35 45 78 70 72 4e 6f 64 65 20 2a 70 52  Fts5ExprNode *pR
5b30: 69 67 68 74 2c 0a 20 20 46 74 73 35 45 78 70 72  ight,.  Fts5Expr
5b40: 4e 65 61 72 73 65 74 20 2a 70 4e 65 61 72 0a 29  Nearset *pNear.)
5b50: 3b 0a 0a 46 74 73 35 45 78 70 72 4e 6f 64 65 20  ;..Fts5ExprNode 
5b60: 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61 72 73  *sqlite3Fts5Pars
5b70: 65 49 6d 70 6c 69 63 69 74 41 6e 64 28 0a 20 20  eImplicitAnd(.  
5b80: 46 74 73 35 50 61 72 73 65 20 2a 70 50 61 72 73  Fts5Parse *pPars
5b90: 65 2c 0a 20 20 46 74 73 35 45 78 70 72 4e 6f 64  e,.  Fts5ExprNod
5ba0: 65 20 2a 70 4c 65 66 74 2c 0a 20 20 46 74 73 35  e *pLeft,.  Fts5
5bb0: 45 78 70 72 4e 6f 64 65 20 2a 70 52 69 67 68 74  ExprNode *pRight
5bc0: 0a 29 3b 0a 0a 46 74 73 35 45 78 70 72 50 68 72  .);..Fts5ExprPhr
5bd0: 61 73 65 20 2a 73 71 6c 69 74 65 33 46 74 73 35  ase *sqlite3Fts5
5be0: 50 61 72 73 65 54 65 72 6d 28 0a 20 20 46 74 73  ParseTerm(.  Fts
5bf0: 35 50 61 72 73 65 20 2a 70 50 61 72 73 65 2c 20  5Parse *pParse, 
5c00: 0a 20 20 46 74 73 35 45 78 70 72 50 68 72 61 73  .  Fts5ExprPhras
5c10: 65 20 2a 70 50 68 72 61 73 65 2c 20 0a 20 20 46  e *pPhrase, .  F
5c20: 74 73 35 54 6f 6b 65 6e 20 2a 70 54 6f 6b 65 6e  ts5Token *pToken
5c30: 2c 0a 20 20 69 6e 74 20 62 50 72 65 66 69 78 0a  ,.  int bPrefix.
5c40: 29 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  );..void sqlite3
5c50: 46 74 73 35 50 61 72 73 65 53 65 74 43 61 72 65  Fts5ParseSetCare
5c60: 74 28 46 74 73 35 45 78 70 72 50 68 72 61 73 65  t(Fts5ExprPhrase
5c70: 2a 29 3b 0a 0a 46 74 73 35 45 78 70 72 4e 65 61  *);..Fts5ExprNea
5c80: 72 73 65 74 20 2a 73 71 6c 69 74 65 33 46 74 73  rset *sqlite3Fts
5c90: 35 50 61 72 73 65 4e 65 61 72 73 65 74 28 0a 20  5ParseNearset(. 
5ca0: 20 46 74 73 35 50 61 72 73 65 2a 2c 20 0a 20 20   Fts5Parse*, .  
5cb0: 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74 2a  Fts5ExprNearset*
5cc0: 2c 0a 20 20 46 74 73 35 45 78 70 72 50 68 72 61  ,.  Fts5ExprPhra
5cd0: 73 65 2a 20 0a 29 3b 0a 0a 46 74 73 35 43 6f 6c  se* .);..Fts5Col
5ce0: 73 65 74 20 2a 73 71 6c 69 74 65 33 46 74 73 35  set *sqlite3Fts5
5cf0: 50 61 72 73 65 43 6f 6c 73 65 74 28 0a 20 20 46  ParseColset(.  F
5d00: 74 73 35 50 61 72 73 65 2a 2c 20 0a 20 20 46 74  ts5Parse*, .  Ft
5d10: 73 35 43 6f 6c 73 65 74 2a 2c 20 0a 20 20 46 74  s5Colset*, .  Ft
5d20: 73 35 54 6f 6b 65 6e 20 2a 0a 29 3b 0a 0a 76 6f  s5Token *.);..vo
5d30: 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61  id sqlite3Fts5Pa
5d40: 72 73 65 50 68 72 61 73 65 46 72 65 65 28 46 74  rsePhraseFree(Ft
5d50: 73 35 45 78 70 72 50 68 72 61 73 65 2a 29 3b 0a  s5ExprPhrase*);.
5d60: 76 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35  void sqlite3Fts5
5d70: 50 61 72 73 65 4e 65 61 72 73 65 74 46 72 65 65  ParseNearsetFree
5d80: 28 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74  (Fts5ExprNearset
5d90: 2a 29 3b 0a 76 6f 69 64 20 73 71 6c 69 74 65 33  *);.void sqlite3
5da0: 46 74 73 35 50 61 72 73 65 4e 6f 64 65 46 72 65  Fts5ParseNodeFre
5db0: 65 28 46 74 73 35 45 78 70 72 4e 6f 64 65 2a 29  e(Fts5ExprNode*)
5dc0: 3b 0a 0a 76 6f 69 64 20 73 71 6c 69 74 65 33 46  ;..void sqlite3F
5dd0: 74 73 35 50 61 72 73 65 53 65 74 44 69 73 74 61  ts5ParseSetDista
5de0: 6e 63 65 28 46 74 73 35 50 61 72 73 65 2a 2c 20  nce(Fts5Parse*, 
5df0: 46 74 73 35 45 78 70 72 4e 65 61 72 73 65 74 2a  Fts5ExprNearset*
5e00: 2c 20 46 74 73 35 54 6f 6b 65 6e 2a 29 3b 0a 76  , Fts5Token*);.v
5e10: 6f 69 64 20 73 71 6c 69 74 65 33 46 74 73 35 50  oid sqlite3Fts5P
5e20: 61 72 73 65 53 65 74 43 6f 6c 73 65 74 28 46 74  arseSetColset(Ft
5e30: 73 35 50 61 72 73 65 2a 2c 20 46 74 73 35 45 78  s5Parse*, Fts5Ex
5e40: 70 72 4e 6f 64 65 2a 2c 20 46 74 73 35 43 6f 6c  prNode*, Fts5Col
5e50: 73 65 74 2a 29 3b 0a 46 74 73 35 43 6f 6c 73 65  set*);.Fts5Colse
5e60: 74 20 2a 73 71 6c 69 74 65 33 46 74 73 35 50 61  t *sqlite3Fts5Pa
5e70: 72 73 65 43 6f 6c 73 65 74 49 6e 76 65 72 74 28  rseColsetInvert(
5e80: 46 74 73 35 50 61 72 73 65 2a 2c 20 46 74 73 35  Fts5Parse*, Fts5
5e90: 43 6f 6c 73 65 74 2a 29 3b 0a 76 6f 69 64 20 73  Colset*);.void s
5ea0: 71 6c 69 74 65 33 46 74 73 35 50 61 72 73 65 46  qlite3Fts5ParseF
5eb0: 69 6e 69 73 68 65 64 28 46 74 73 35 50 61 72 73  inished(Fts5Pars
5ec0: 65 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35 45  e *pParse, Fts5E
5ed0: 78 70 72 4e 6f 64 65 20 2a 70 29 3b 0a 76 6f 69  xprNode *p);.voi
5ee0: 64 20 73 71 6c 69 74 65 33 46 74 73 35 50 61 72  d sqlite3Fts5Par
5ef0: 73 65 4e 65 61 72 28 46 74 73 35 50 61 72 73 65  seNear(Fts5Parse
5f00: 20 2a 70 50 61 72 73 65 2c 20 46 74 73 35 54 6f   *pParse, Fts5To
5f10: 6b 65 6e 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e  ken*);../*.** En
5f20: 64 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74  d of interface t
5f30: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 65  o code in fts5_e
5f40: 78 70 72 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  xpr.c..*********
5f50: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f60: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f70: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f80: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5f90: 2a 2f 0a 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a  */..../*********
5fa0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5fb0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5fc0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5fd0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
5fe0: 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74  *.** Interface t
5ff0: 6f 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 61  o code in fts5_a
6000: 75 78 2e 63 2e 20 0a 2a 2f 0a 0a 69 6e 74 20 73  ux.c. .*/..int s
6010: 71 6c 69 74 65 33 46 74 73 35 41 75 78 49 6e 69  qlite3Fts5AuxIni
6020: 74 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f 2a  t(fts5_api*);./*
6030: 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72  .** End of inter
6040: 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20  face to code in 
6050: 66 74 73 35 5f 61 75 78 2e 63 2e 0a 2a 2a 2a 2a  fts5_aux.c..****
6060: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6070: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6080: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6090: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60a0: 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a 2a 2a 2a 2a 2a  ******/../******
60b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
60f0: 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74 65 72 66 61 63  ****.** Interfac
6100: 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66 74 73  e to code in fts
6110: 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63 2e 20 0a  5_tokenizer.c. .
6120: 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33 46  */..int sqlite3F
6130: 74 73 35 54 6f 6b 65 6e 69 7a 65 72 49 6e 69 74  ts5TokenizerInit
6140: 28 66 74 73 35 5f 61 70 69 2a 29 3b 0a 2f 2a 0a  (fts5_api*);./*.
6150: 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65 72 66  ** End of interf
6160: 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e 20 66  ace to code in f
6170: 74 73 35 5f 74 6f 6b 65 6e 69 7a 65 72 2e 63 2e  ts5_tokenizer.c.
6180: 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  .***************
6190: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61a0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 2f 2a  ***********/../*
61d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
61f0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6200: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6210: 2a 2a 2a 2a 2a 2a 2a 2a 2a 0a 2a 2a 20 49 6e 74  *********.** Int
6220: 65 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69  erface to code i
6230: 6e 20 66 74 73 35 5f 76 6f 63 61 62 2e 63 2e 20  n fts5_vocab.c. 
6240: 0a 2a 2f 0a 0a 69 6e 74 20 73 71 6c 69 74 65 33  .*/..int sqlite3
6250: 46 74 73 35 56 6f 63 61 62 49 6e 69 74 28 46 74  Fts5VocabInit(Ft
6260: 73 35 47 6c 6f 62 61 6c 2a 2c 20 73 71 6c 69 74  s5Global*, sqlit
6270: 65 33 2a 29 3b 0a 0a 2f 2a 0a 2a 2a 20 45 6e 64  e3*);../*.** End
6280: 20 6f 66 20 69 6e 74 65 72 66 61 63 65 20 74 6f   of interface to
6290: 20 63 6f 64 65 20 69 6e 20 66 74 73 35 5f 76 6f   code in fts5_vo
62a0: 63 61 62 2e 63 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a  cab.c..*********
62b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
62f0: 2a 2f 0a 0a 0a 2f 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  */.../**********
6300: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6310: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6320: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6330: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
6340: 0a 2a 2a 20 49 6e 74 65 72 66 61 63 65 20 74 6f  .** Interface to
6350: 20 61 75 74 6f 6d 61 74 69 63 61 6c 6c 79 20 67   automatically g
6360: 65 6e 65 72 61 74 65 64 20 63 6f 64 65 20 69 6e  enerated code in
6370: 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e 63   fts5_unicode2.c
6380: 2e 20 0a 2a 2f 0a 69 6e 74 20 73 71 6c 69 74 65  . .*/.int sqlite
6390: 33 46 74 73 35 55 6e 69 63 6f 64 65 49 73 64 69  3Fts5UnicodeIsdi
63a0: 61 63 72 69 74 69 63 28 69 6e 74 20 63 29 3b 0a  acritic(int c);.
63b0: 69 6e 74 20 73 71 6c 69 74 65 33 46 74 73 35 55  int sqlite3Fts5U
63c0: 6e 69 63 6f 64 65 46 6f 6c 64 28 69 6e 74 20 63  nicodeFold(int c
63d0: 2c 20 69 6e 74 20 62 52 65 6d 6f 76 65 44 69 61  , int bRemoveDia
63e0: 63 72 69 74 69 63 29 3b 0a 0a 69 6e 74 20 73 71  critic);..int sq
63f0: 6c 69 74 65 33 46 74 73 35 55 6e 69 63 6f 64 65  lite3Fts5Unicode
6400: 43 61 74 50 61 72 73 65 28 63 6f 6e 73 74 20 63  CatParse(const c
6410: 68 61 72 2a 2c 20 75 38 2a 29 3b 0a 69 6e 74 20  har*, u8*);.int 
6420: 73 71 6c 69 74 65 33 46 74 73 35 55 6e 69 63 6f  sqlite3Fts5Unico
6430: 64 65 43 61 74 65 67 6f 72 79 28 69 6e 74 20 69  deCategory(int i
6440: 43 6f 64 65 29 3b 0a 76 6f 69 64 20 73 71 6c 69  Code);.void sqli
6450: 74 65 33 46 74 73 35 55 6e 69 63 6f 64 65 41 73  te3Fts5UnicodeAs
6460: 63 69 69 28 75 38 2a 2c 20 75 38 2a 29 3b 0a 2f  cii(u8*, u8*);./
6470: 2a 0a 2a 2a 20 45 6e 64 20 6f 66 20 69 6e 74 65  *.** End of inte
6480: 72 66 61 63 65 20 74 6f 20 63 6f 64 65 20 69 6e  rface to code in
6490: 20 66 74 73 35 5f 75 6e 69 63 6f 64 65 32 2e 63   fts5_unicode2.c
64a0: 2e 0a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ..**************
64b0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
64c0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
64d0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a  ****************
64e0: 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2a 2f 0a 0a 23  ************/..#
64f0: 65 6e 64 69 66 0a                                endif.