Duvida sobre melhor forma de aplicação de acesso a dados.

[henriquegiaretta]

Olá, pessoal. Tudo bem?

Estou fazendo o curso, e me deparei com uma situação que me pediram aqui. Gostaria da opinião de vocês, por favor.

Eu tenho que criar uma aplicação .NET que irá consultar (acessar) uma view de uma banco de dados SQL Server externo. Com o retorno dessa view, eu vou ter que verificar no meu banco local (também SQL Server) se o user existe e se algumas funcionalidades atraladas ao user existem. Caso essas funcionalidades não estejam vinculadas ao meu user local, eu vou ter que inserir.

Basicamente, é uma aplicação que irá acessar dois bancos (externo e local) comparar o banco local com o externo e fazer os updates quando necessário.

Como vocês me orientariam a fazer isso? Tava pensando em um BulkInsert, mas não sei se é a melhora maneira. Alguém já fez uma aplicação desse tipo? Para rodar e "converter" dados de um banco para o outro?

Abraço galera.

[andrebaltieri]

Boa tarde @henriquegiaretta!

O BulkInsert para cenários com muitas inserções é o mais recomendado, no caso quantos registros seriam? Precisa de mais detalhes para para poder opinar melhor sobre o caso.

Em adicional, sempre recomendo fazer PoCs e ver o que funciona melhor!

[henriquegiaretta]

Grande @andrebaltieri . Obrigado por responder.

Então, em média é 5 mil registros em SQL Server. A ideia inicial é fazer uma PoC, porém eu realmente não sei o que seria melhor para começar. Como não vai ser um API, eu pensei em um criar um console application mesmo. Com isso, acredito que todos os métodos vão ter que ficar dentro do program.cs, para que quando executar a aplicação, esses métodos sejam executados.

Você me recomenda criar um console application, conectar nos dois bancos e usar o bulkInsert? Ou qual seria a melhor maneira de começar esse "conversor".

[rfpe]

Algumas perguntas que podem te ajudar a projetar esta solução.

Isto será executado uma vez só ou periodicamente? Qual o período?
Vc consegue fazer estas operações em lotes (X por vez) ou tem que ser "tudo ou nada"?
Precisa/pode paralelizar?
Precisa de acesso exclusivo ao DB? Precisar desconectar usuários?
Seu ambiente possui recursos para processar tudo em RAM ou precisaria de apoio do HD?
Você tem alguma janela de execução/limite de tempo para concluir as inserções?
Qual seu método atual para loggar estas operações? Vai usar o mesmo ou outro?
Quem/como será monitorado estes inserts em caso de falha/sucesso?

[henriquegiaretta]

Faaala @rfpe. Muito obrigado pela colaboração.

A ideia inicial é executar tudo de uma vez. Depois, vamos pensar (conforme o crescimento do banco de dados externo) em disponibilizar essa aplicação para rodar em perídos, como 1 vez por semana (exemplo).

De resto, acredito que todas as respostas para as tuas perguntas estão claras no escopo do projeto. Me bate somente a duvida técnica mesmo, que é por onde começar a desenvolver um "conversor", pois sempre mexi com API.

Grande abraço

[rfpe]

Blz! Como já está tudo no escopo do projeto e você já mexe com (Web)APIs, ficou simples =)

É apenas um console app com um "controller", que usa dois "services", que consomem "repositories", um para a fonte de dados e outro para o destino, que executa a lógica de "conversão" especificada.
E sim, o BulkInsert é boa prática neste caso.

Boa sorte!

[henriquegiaretta]

Perfeito, @rfpe. Consegui captar a ideia. Como será um console app eu posso executar ele (como por exemplo um .net run) e a aplicação será executada, ou seja, não tem a necessidade de acessar uma rota.