Bruk Historisk befolkningsregister, HBR, histreg.no som felles plattform!

[Lars Holden]

18 hours ago, Lars Holden said:

Vi tar med oss de rådene vi får. Det er Arkivverket som drifter histreg og Digitalarkivet. De har mye kompetanse på området. Digitalarkivet har vant til å håndtere stor trafikk. Men det er et krevende områder der det jevnlig kommer nye utfordringer. 

Nå har vi laget en plan for hvordan dette skal håndteres. På kort slikt skal Arkivverket øke kapasiteten noe. Vi skal også gjøre noen endringer i histreg, bl.a. at søkemotorer ikke indekserer personsider og at histreg-koden blir mer robust i de tilfellene API-kallet til Digitalarkivet blir overbelastet. Disse programendringene vil tidligst ha effekt i slutten av neste uke. I mellomtiden får vi håpe at kapasitetsøkningen reduserer problemet.

 

Jeg er redd for at det jevnlig vil oppstå slike problemstillinger. Histreg-databasen blir mer og mer verdifull og kjent, og utviklingen innen søkemotorer og KI, vil trolig jevnlig gi oss nye utfordringer. 

[Arne Toftøy-Andersen]

Nå gå det uten problemer, etter det jeg kan se! Takk for rask handling!

[Lars Holden]

30 minutes ago, Arne Toftøy-Andersen said:

Nå gå det uten problemer, etter det jeg kan se! Takk for rask handling!

Det stemmer at vi innførte de første tiltakene for et par timer siden. Det kommer flere tiltak i løpet av denne og neste uke. Et av tiltakene var å stenge uten en IP-adresse som er kjent for å være skadelig. 

[Kjell Inge Tomren]

Jeg finner nå ganske ofte personprofiler av kvinner som består av dåp, kanskje folketellinger 1900, 1910 og 1920, kanskje konfirmasjon og så dødsfall der fornavnet er det samme, men etternavnet et annet enn pikenavnet. Det er så mange at jeg antar at algoritmer har blitt brukt. Hvis min antagelse stemmer, er det mulig å få vite om «matchen» bare er på grunnlag av fornavn og fødselsdato eller om det det finnes noen tilleggsopplysninger som gir koblingen?
Og for ordens skyld: Min manuelle prosedyre for å gjøre tilsvarende kobling er å søke på fornavn og fødselsdato og så sjekke om pikenavnet er nevnt i dødsannonsen. 

[Lars Holden]

1 hour ago, Kjell Inge Tomren said:

Jeg finner nå ganske ofte personprofiler av kvinner som består av dåp, kanskje folketellinger 1900, 1910 og 1920, kanskje konfirmasjon og så dødsfall der fornavnet er det samme, men etternavnet et annet enn pikenavnet. Det er så mange at jeg antar at algoritmer har blitt brukt. Hvis min antagelse stemmer, er det mulig å få vite om «matchen» bare er på grunnlag av fornavn og fødselsdato eller om det det finnes noen tilleggsopplysninger som gir koblingen?
Og for ordens skyld: Min manuelle prosedyre for å gjøre tilsvarende kobling er å søke på fornavn og fødselsdato og så sjekke om pikenavnet er nevnt i dødsannonsen. 

Jeg har også sett en del slike personer. Det kan være et resultat av en algoritme jeg brukte for en god stund siden. Vurderingen da var at fødselsdato, sjeldent fornavn (ofte uvanlig dobbeltnavn) og størrelsen på området, var tilstrekkelig for å lenke. Etter hvert så jeg at vurderingen av sjeldent fornavn og størrelse på området ikke var god nok og stoppet å bruke algoritmen. Samtidig er dette en feillenking som sjelden oppdages maskinelt. Det avhenger i stor grad at man finner det riktige dødsfallet og dataene her gjør at man er sikker på hvilket dødsfall som er riktig. 

[Kjell Inge Tomren]

53 minutter siden, Lars Holden skrev:

Etter hvert så jeg at vurderingen av sjeldent fornavn og størrelse på området ikke var god nok og stoppet å bruke algoritmen. 

Så da er disse ikke sikre, men bør sjekkes manuelt og merkes som sikre hvis de f.eks kan bekreftes av dødsannonse. Fjernes hvis de blir avkreftet. 

[Bodil Hørlück Berg]

4 minutter siden, Kjell Inge Tomren skrev:

Så da er disse ikke sikre, men bør sjekkes manuelt og merkes som sikre hvis de f.eks kan bekreftes av dødsannonse. Fjernes hvis de blir avkreftet. 

Jeg har løsnet ganske mange dødsfall som ikke hører til resten av profilen. Skal ofte bare et enkelt søkt til for å finne ut at det er feil, mens det gjerne må litt mer sjekk til for å få på plass det riktige.

[Lars Holden]

3 hours ago, Kjell Inge Tomren said:

Så da er disse ikke sikre, men bør sjekkes manuelt og merkes som sikre hvis de f.eks kan bekreftes av dødsannonse. Fjernes hvis de blir avkreftet. 

enig

[Arild Maka]

På 18.10.2025 den 16.16, Kjell Inge Tomren skrev:

Jeg finner nå ganske ofte personprofiler av kvinner som består av dåp, kanskje folketellinger 1900, 1910 og 1920, kanskje konfirmasjon og så dødsfall der fornavnet er det samme, men etternavnet et annet enn pikenavnet. Det er så mange at jeg antar at algoritmer har blitt brukt. Hvis min antagelse stemmer, er det mulig å få vite om «matchen» bare er på grunnlag av fornavn og fødselsdato eller om det det finnes noen tilleggsopplysninger som gir koblingen?
Og for ordens skyld: Min manuelle prosedyre for å gjøre tilsvarende kobling er å søke på fornavn og fødselsdato og så sjekke om pikenavnet er nevnt i dødsannonsen. 

Det er relativt sjelden at pikenavn står i dødsannonsen. Jeg har løst mer eller mindre alle slik med å finne lysningen/bryllupet i aviser. Har nå klart å finne alle født 1915-1920 i FT 1920 for min kommune. Går snart løs på 1914.

[Arild Maka]

Er det gjort noen endringer i søket?

 

Når jeg nå gjør et litt åpent søk, så får jeg ingen resultater, kun opp et tomt søkevindu. Det virket fint i går.

 

F. eks. får jeg det hvis jeg søker etter alle født i et bestemt år i en folketelling (uten å angi navn).

[Arild Maka]

2 minutter siden, Arild Maka skrev:

Er det gjort noen endringer i søket?

 

Når jeg nå gjør et litt åpent søk, så får jeg ingen resultater, kun opp et tomt søkevindu. Det virket fint i går.

 

F. eks. får jeg det hvis jeg søker etter alle født i et bestemt år i en folketelling (uten å angi navn).

Ser ut til at det virker fint hvis jeg legger inn * i navnefeltene. Men ser ikke helt hensikten med denne endringen. Og hvis slike radikale endringer skal gjøres, så hadde det vært fint med litt informasjon.

[Lars Holden]

1 hour ago, Arild Maka said:

Ser ut til at det virker fint hvis jeg legger inn * i navnefeltene. Men ser ikke helt hensikten med denne endringen. Og hvis slike radikale endringer skal gjøres, så hadde det vært fint med litt informasjon.

Ja, det er endret slik at søk bare med fødselsår ikke lengre virker. Det er ledd i redusere belastningen på histreg fra søkemotorer. Vi så mange slike søk og antok dette var fra roboter. Jeg ser at det gir mening innen en liten kommune. Så lenge manuelle brukere skjønner at de kan legge inn * i et navnefelt, antar jeg at dette fungerer for manuelle brukere. 

 

Det kommer flere begrensninger etter hvert. Så får dere si fra om det skaper problemer.  

[Arild Maka]

Et par ting til med det samme:

1. Det virker som om nyere emigrantprotokoller ikke gir resultater ved søk. Kan disse legges inn, eller er det en grunn til at de ikke skal gi treff?

Tar med ett eksempel: Søk etter "Solveig", Emigrasjon og år 1936-1936. Søket gir null treff. Dette selv om hun ligger inne som emigrert: https://histreg.no/index.php/person/pd00000020489359

 

2. Flere har nevnt at Vielse - Brud gir treffe på alle kategorier (barn, mor, brud osv). For å få frem kun vielser må en inn i søkestrengen og endre "brud" til "brur" manuelt etter søket. Det bør være en enkel sak å få endret dette i søkestrengen som ligger inne i programmet "&rolle%5B%5D=brud" til "&rolle%5B%5D=brur".

[Lars Holden]

Grunnen til manglende treff i emigrantprotokoller tror jeg skyldes at Digitalarkivet ikke har indeksert dette. 

Grunnen feil med vielse er en bug i histreg. Den er rapportert før, men vi har ikke fått prioritert dette. Selv om det antagelig bare er noen få tegn som skal endres i koden, tar det litt tid å finne riktig sted, finne hva det skal endres til og utføre nødvendige tester.

 

For øyeblikket arbeider vi med å håndtere den store belastningen på systemet og familier.  

[Arkivverket - Kristian Hunskaar]

4 timer siden, Arild Maka skrev:

1. Det virker som om nyere emigrantprotokoller ikke gir resultater ved søk. Kan disse legges inn, eller er det en grunn til at de ikke skal gi treff?

Tar med ett eksempel: Søk etter "Solveig", Emigrasjon og år 1936-1936. Søket gir null treff. Dette selv om hun ligger inne som emigrert: https://histreg.no/index.php/person/pd00000020489359

 

4 timer siden, Lars Holden skrev:

Grunnen til manglende treff i emigrantprotokoller tror jeg skyldes at Digitalarkivet ikke har indeksert dette.

 

Emigrantprotokollene er indeksert i Digitalarkivet og de er søkbare i Histreg, men ikke på alle måter.

 

1867-emigranten Peder Pedersen Kirkeby (her i Digitalarkivet: https://www.digitalarkivet.no/view/557/pe00000000000001) får jeg treff på i Histreg ved å søke på fornavn = Peder, etternavn = Kirkeby og tidsperiode 1867-1867: https://histreg.no/index.php/searchresults?name=Peder&surname=Kirkeby&kjonn=&birthyearfrom=&birthyearto=&birthdate=&birthplace=&place=&job=&searchresults=&fra=1867&til=1867

 

Men dersom jeg i tillegg avgrenser søket til hendelsestypen emigrasjon, får jeg 0 treff: https://histreg.no/index.php/searchresults?name=Peder&surname=Kirkeby&kjonn=&birthyearfrom=&birthyearto=&birthdate=&birthplace=&place=&job=&searchresults=&em=on&fra=1867&til=1867

 

Jeg tipper at hendelsestypen emigrasjon er hardkodet til å søke i bestemte kildetyper, og at kildetypen Emigrantprotokoll med kildetypekoden EMPR ikke er blant disse. Denne kildetypen og kildetypekoden ble innført i Digitalarkivet i 2024(?), da arbeidet med å oppgradere emigrant-persondataene startet. Det kan godt være at utviklerne av Histreg ikke har blitt gjort oppmerksomme på dette fra Arkivverkets side, men jeg vil likefullt tro at det er programkoden til søkefunksjonen i Histreg som trenger en liten oppdatering her.

 

[Lars Holden]

52 minutes ago, Arkivverket - Kristian Hunskaar said:

 

 

Emigrantprotokollene er indeksert i Digitalarkivet og de er søkbare i Histreg, men ikke på alle måter.

 

1867-emigranten Peder Pedersen Kirkeby (her i Digitalarkivet: https://www.digitalarkivet.no/view/557/pe00000000000001) får jeg treff på i Histreg ved å søke på fornavn = Peder, etternavn = Kirkeby og tidsperiode 1867-1867: https://histreg.no/index.php/searchresults?name=Peder&surname=Kirkeby&kjonn=&birthyearfrom=&birthyearto=&birthdate=&birthplace=&place=&job=&searchresults=&fra=1867&til=1867

 

Men dersom jeg i tillegg avgrenser søket til hendelsestypen emigrasjon, får jeg 0 treff: https://histreg.no/index.php/searchresults?name=Peder&surname=Kirkeby&kjonn=&birthyearfrom=&birthyearto=&birthdate=&birthplace=&place=&job=&searchresults=&em=on&fra=1867&til=1867

 

Jeg tipper at hendelsestypen emigrasjon er hardkodet til å søke i bestemte kildetyper, og at kildetypen Emigrantprotokoll med kildetypekoden EMPR ikke er blant disse. Denne kildetypen og kildetypekoden ble innført i Digitalarkivet i 2024(?), da arbeidet med å oppgradere emigrant-persondataene startet. Det kan godt være at utviklerne av Histreg ikke har blitt gjort oppmerksomme på dette fra Arkivverkets side, men jeg vil likefullt tro at det er programkoden til søkefunksjonen i Histreg som trenger en liten oppdatering her.

 

Dette var nytt for meg. Da skal vi endre dette i histreg koden. Det er imidlertid andre ting som må gjøres først.

 

Arkivverket skal snart ferdigstille en ny gjennomgang av emigrantmaterialet. Når det er ferdigstilt, skal vi forsøke å arbeide mer med denne kilden. Vi er også i dialog med noen amerikanske miljøer og håper å etablere en metode for å lenke nordmenn som emigrerte til amerikanske kilder. Ofte er det så lite informasjon i emigrantprotokollene at det er vanskelig å etablere en sikker lenke

[Arild Maka]

Det er en del kategorier/kilder i Histreg som en ikke kan begrense søket til. Det er på ingen måte intuitivt at disse i det hele tatt finnes. Så den eneste måten å få treff på er å søke uten å krysse av en kategori/hendelse. Det fører gjerne til at en får så mange treff at søket i praksis ikke kan gjennomføres. F. eks. gjelder dette innflytting og utflytting i kirkebøker. Akkurat nå fant jeg en kategori med "innflyttede svensker" som jeg aldri har sett før, men som jeg egentlig har savnet. Det burde kanskje lages en oversikt over hvilke kilder som hører inn under hver "Hendelse" og hvilke som en inntil videre må ha et åpent søk på for å få treff (ref EMPR i innleggene over).
 

Av og til kunne det være ønskelig å gjøre et "negativt" søk. Det er mulig å gjøre dette i navnefeltene ved å sette minus foran (-Ole), men det er f. eks. ikke mulig å gjøre et åpnet søk, men utelukke alle treff fra f. eks. kirkebøker eller alle treff fra de kategoriene som en kan krysse av for (Hendelser). Da kan det være lettere å få frem treff i kategorier/kilder som en kanskje ikke visste var der.

[Aase R Sæther - Gloppen]

Er det berre hos meg, eller er det uvanleg mykje Error no? Eg har ikkje greidd å arbeide normalt i systemet på fleire dagar.

[Bodil Hørlück Berg]

4 timer siden, Aase R Sæther - Gloppen skrev:

Er det berre hos meg, eller er det uvanleg mykje Error no? Eg har ikkje greidd å arbeide normalt i systemet på fleire dagar.

Det er ikke bare deg. Det er fortsatt mange feilmeldinger, om at jeg har gjort for mange/hyppige forespørsler og søk, altså at det å jobbe i histreg tolkes som spam… Men det jobbes vel fortsatt med saken, så jeg håper på snarlig bedring.

[Lars Holden]

8 hours ago, Arild Maka said:

Det er en del kategorier/kilder i Histreg som en ikke kan begrense søket til. Det er på ingen måte intuitivt at disse i det hele tatt finnes. Så den eneste måten å få treff på er å søke uten å krysse av en kategori/hendelse. Det fører gjerne til at en får så mange treff at søket i praksis ikke kan gjennomføres. F. eks. gjelder dette innflytting og utflytting i kirkebøker. Akkurat nå fant jeg en kategori med "innflyttede svensker" som jeg aldri har sett før, men som jeg egentlig har savnet. Det burde kanskje lages en oversikt over hvilke kilder som hører inn under hver "Hendelse" og hvilke som en inntil videre må ha et åpent søk på for å få treff (ref EMPR i innleggene over).
 

Av og til kunne det være ønskelig å gjøre et "negativt" søk. Det er mulig å gjøre dette i navnefeltene ved å sette minus foran (-Ole), men det er f. eks. ikke mulig å gjøre et åpnet søk, men utelukke alle treff fra f. eks. kirkebøker eller alle treff fra de kategoriene som en kan krysse av for (Hendelser). Da kan det være lettere å få frem treff i kategorier/kilder som en kanskje ikke visste var der.

Jeg skal se på dette

[Lars Holden]

1 hour ago, Bodil Hørlück Berg said:

Det er ikke bare deg. Det er fortsatt mange feilmeldinger, om at jeg har gjort for mange/hyppige forespørsler og søk, altså at det å jobbe i histreg tolkes som spam… Men det jobbes vel fortsatt med saken, så jeg håper på snarlig bedring.

Ja, vi arbeider fortsatt med driftstabiliteten ved å begrense tilgangen fra søkemotorer og ved å gjøre histreg mer stabil når den får melding fra Digitalarkivet at det er overbelastet. 

[Hanne Astad]

8 timer siden, Aase R Sæther - Gloppen skrev:

Er det berre hos meg, eller er det uvanleg mykje Error no? Eg har ikkje greidd å arbeide normalt i systemet på fleire dagar.

 

3 timer siden, Bodil Hørlück Berg skrev:

Det er ikke bare deg. Det er fortsatt mange feilmeldinger, om at jeg har gjort for mange/hyppige forespørsler og søk, altså at det å jobbe i histreg tolkes som spam… Men det jobbes vel fortsatt med saken, så jeg håper på snarlig bedring.

I dag er det helt umulig, i perioder får man nærmest 10 feilmeldinger før man får lagret en endring. 

Edited October 22 by Hanne Astad

[Lars Holden]

29 minutes ago, Hanne Astad said:

 

I dag er det helt umulig, i perioder får man nærmest 10 feilmeldinger før man får lagret en endring. 

Beklager. Vi arbeider med problemene. Det skyldes stor belastning fra ukjente brukere. 

[Hanne Astad]

Akkurat nå, Lars Holden skrev:

Beklager. Vi arbeider med problemene. Det skyldes stor belastning fra ukjente brukere. 

Jeg vet jo at det jobbes med, så det går greit 🙂 Kanskje forslaget til Kjell Inge Tomren om captcha for uinnloggede er en god løsning etterhvert 🙂 

[Aase R Sæther - Gloppen]

Dumt. Det tok 4 søk før denne kom fram - og då er det nesten slik at det hadde vore betre om sida vart heilt stengt til ein fann ut av det.